会员登录 - 用户注册 - 设为首页 - 加入收藏 - 网站地图 业界最大数据湖0故障迁上阿里云!数据量达500PB!

业界最大数据湖0故障迁上阿里云!数据量达500PB

时间:2024-12-26 10:12:11 来源:自新之路网 作者:综合 阅读:427次

11月6日消息,业界今天阿里云宣布,最大障迁小红书技术团队近日完成了一项业界前所未有的数据上阿数据壮举,将业界最大数据湖0故障迁移至阿里云。湖故

作为中国头部互联网公司之一,云量达小红书月活用户已超过3亿,业界其数据湖存储了过去11年的最大障迁所有原始数据,包括结构化、数据上阿数据半结构化和非结构化数据。湖故

业界最大数据湖0故障迁上阿里云!数据量达500PB

随着业务的云量达高速增长,小红书对在线处理数据的业界需求不断增加,同时离线处理所积累的最大障迁历史问题也提高了切换的难度。

2023年11月,数据上阿数据小红书共有1500人参与迁云项目——计划一年内,湖故把小红书的云量达数据湖搬上阿里云,彼时即便是业界体量最大的案例,也远小于小红书的本次迁移。

2024年5月,项目正式进入双跑阶段,作为切换到正式环境前最后的测试,是稳定性最大的保障。

在这一阶段,团队需要解决的问题数不胜数,每周平均新增500多个问题。

在阿里云团队的全力保障下,小红书技术团队顺利完成了割接,没有发生任何一个P2及以上故障。

2024年11月,小红书迁云项目正式宣告结束,在没有故障的情况下,迁移数据500PB,任务11万,参与人数1500人,涉及部门40多个。

(责任编辑:焦点)

相关内容
  • 燃油插混两种动力!新款本田英仕派官宣:现款18.28万起
  • 关键时刻能救命!vivo联合高德地图开启无网通信卫星求救合作
  • 霍德尔:决赛前解雇穆帅是列维的重大错误,当初请他就是为了冠军
  • [流言板]塔特姆:海沃德加盟的时候,我曾经申请过交易
  • 陌路把天霸爆了:我拿的钱最少,俱乐部不敢找我麻烦!!
  • 德凯特拉雷:我的进球绝对没有犯规 很高兴对阵老东家取得进球
  • 合肥发布网约车行业风险提示:空驶率达45%!近八成司机日均流水不足300元
  • 意甲积分榜:亚特兰大9连胜+先赛登顶!米兰仍第7距榜首12分
推荐内容
  • 万代新推竹材夏亚专用扎古2钢普拉 精致精细别样气质
  • 每体:巴萨开始对续约阿劳霍持乐观态度,球员盼留队&明年再谈判
  • 斯诺克苏格兰公开赛:中国球员提前锁定冠亚军
  • 记者:费伦茨瓦罗斯接近签下纳比
  • Whoscored赛季至今德甲最佳阵:凯恩领衔,拜仁4人入选
  • 现场看SU7生产线!走进小米汽车工厂第三期开启报名:限量20人