自建IDC迁移上云

华为云助力美图业务快速上云

  • 存算一体,集群利用率低

    业务随节假日、热点事件等发生,导致数据量瞬间暴涨。而线下机房受限,且计算资源与存储资源绑定,无法根据计算和存储的不同增长情况分别动态扩容,资源整体利用率低。

  • 数据孤岛

    集团业务错综复杂,统计业务复杂多样,业务之间都有各自数据,数据也都各自存储,各自定义。导致数据就像一个个孤岛一样极其困难和企业内部的其他数据进行连接互动。

  • 运维工作量大成本高

    美图的DBA人均维护数据库和实例多达100+,人力严重不足,大量数据库日常运维工作挤满DBA时间。采用的开源Hadoop自建大数据平台,开源Bug和性能问题处理、集群扩容等场景,均需要投入大量运维成本。

  • 大数据迁移解决方案助力美图7大业务模块平滑上云

    首先将业务底座升级为云原生基础设施,实现性能、弹性伸缩能力的极大提升;并通过存算分离+鲲鹏低成本大数据解决方案,将7大业务模块平滑顺利迁移至华为公有云,提升并行计算、降低跨服务器数据传输。

  • 性能提升

    基于云原生基础设施的极致性能和极速弹性扩容能力,在用户高并发场景下,核心业务及数据库性能依旧稳定,QPS提升3.5倍,帮助美图高效应对20亿+客户的海量突发业务请求

  • 降本提效

    集群总核数相比自建下降20%。资源按需扩容,利用率提升40%,综合成本下降30%;一份数据自由流动,避免重复拷贝,支持多元计算+AI创新,使数据快速变现,有效实现降本提效。

  • 安全可靠

    通过部署多种灾备形态,满足美图不同业务的灾备需求,数据库容灾能力得到增强;备份数据可靠性高达11个9,TB级数据分钟级内恢复,为美图业务保驾护航

CDH迁移上云

华为云助力北汽福田车联网业务快速上线

  • 自建机房空间不足,扩建与研发投入成本高

    客户已有两个自建机房,利用传统重量级ESB总线式建设,来打通烟囱式应用。大量使用传统的中间件和数据库,软硬件整体成本高昂。

  • 运维成本持续增长

    IT研发及运维人员不足以支撑业务的快速发展(百万级并发、毫秒/秒级响应、海量数据)及7*24小时业务不中断。

  • 升级大数据分析能力

    客户希望做车辆状态分析、实时监控等分析,希望通过车联网数据挖掘车辆的疲劳驾 驶、异常轨迹挖掘、油耗异常波动分析。

  • IT应用全面服务化、云化

    福田汽车车联网平台采用互联网主流、标准、开源技术架构,采用云计算、负载均衡技术、大数据技术、容器技术等,支持高可用性、高负载、海量数据,采用构件技术、实现多种协议弹性接入和行业应用高度可配置,构成完整的安全、可扩展、开放的车联网平台架构。

  • 资源弹性扩缩容

    整体方案“按需使用,以租代建”,资源发放从“天”缩短到现在的“分钟”级别。CCE容器化,实现秒级弹性扩容,实现计算资源弹性。

  • 安全高可靠

    百万级并发接入能力,支撑福田约90万辆车安全稳定接入

  • 打通全价值链数据

    华为云提供端到端的解决方案,打通全价值链数据。如车辆救援过程全程可视,故障提前预警,车辆救援费用降低10%~30%。

云上自建迁移

华为云助力蘑菇街业务平滑迁移

  • 资源扩容难,算法任务投递阻塞

    现有平台需支撑蘑菇街多个算法团队,每天需要投放数千次的任务投递,高峰期易出现相关任务阻塞的问题。

  • 资源池割裂,存算一体,利用率低

    原有 Spark 大数据与机器学习业务分别在不同的平台上运行,资源没有充分利用,急需统一平台提升效率。随着数据量增加,在存储扩容时必须同步计算扩容,成本剧增。

  • 运维难度大成本高,冷热数据搬迁困难

    Spark 大数据、机器学习等业务对运维诉求不一,且大数据部件众多。伴随着开源社区的持续发展,升级、运维工作量巨大。

  • 鲲鹏 + 存算分离大数据 有效降低成本

    基于华为云大数据服务MRS,屏蔽底层芯片差异,让客户业务平滑迁移大数据解决方案,计算和存储资源完全解耦,独立配置,综合成本降低 30%。

  • 提升计算效率

    资源极速扩容、任务智能调度,解决了资源不足、任务分配不合理及等待死锁等问题,极大提升 Spark 大数据、机器学习的任务执行效率,数据统一存在OBS,无需在多个系统中互拷数据, 提升计算效率。

  • 节约成本资源

    实现系统可随业务峰谷自动扩缩容,存算分离让计算和存储资源更加合理匹配,充分提升资源利用率。资源使用总核数降10%,存储效率升40%,综合成本降30%。

  • 降低运维成本

    使用云原生大数据和云原生高性能计算解决方案后,蘑菇街无需关心基础设施日常运维和管理,降低用户运维复杂度。同时Spark、TensorFlow开箱即用,节省安装运维成本。

  • 业务创新升级

    基于全新架构的大数据和机器学习平台,蘑菇街联合华为云打造了智能换装业务,让用户成为在线“主播”,实时体验穿搭效果,极大提升了用户购物体验,增强了用户粘性。

亮点与优势

  • 完全兼容开源

    100%兼容开源生态接口,存算分离数据迁移,支持屏蔽OBS接口,业务无感知,客户业务代码“0”改动

  • 领先开源技术

    主流引擎Spark、Hive、Flink等深度改造,拥有索引、缓存、元数据等关键技术;自研CarbonData毫秒级点查,Superior调度突破单集群20000节点+

  • 资源弹性伸缩

    资源灵活配比,可以选择鲲鹏/x86不同配比的Flavor规格,集群异构混合部署,峰谷任务灵活配置策略,自动弹性伸缩,百节点分钟级发放,大大降低TCO

  • 搬迁简单快速

    成熟的大数据搬迁生态,包含:搬迁方法论,各场景迁移指导方案,迁移工具等等,业务无改动,实现不停服高效、平滑迁移

更多合作伙伴

1对1咨询华为云专家,了解适合自己的大数据迁移方案

立即咨询