业界最大数据湖0故障迁上阿里云！数据量达500PB
发布时间：2024-12-30 01:18:37 作者：玩站小弟 
我要评论
我要评论11月6日消息，今天阿里云宣布，小红书技术团队近日完成了一项业界前所未有的壮举，将业界最大数据湖0故障迁移至阿里云。作为中国头部互联网公司之一，小红书月活用户已超过3亿，其数据湖存储了过去11年的所有
。
11月6日消息，业界今天阿里云宣布，最大障迁小红书技术团队近日完成了一项业界前所未有的数据上阿数据壮举，将业界最大数据湖0故障迁移至阿里云。湖故
作为中国头部互联网公司之一，云量达小红书月活用户已超过3亿，业界其数据湖存储了过去11年的最大障迁所有原始数据，包括结构化、数据上阿数据半结构化和非结构化数据。湖故
随着业务的云量达高速增长，小红书对在线处理数据的业界需求不断增加，同时离线处理所积累的最大障迁历史问题也提高了切换的难度。
2023年11月，数据上阿数据小红书共有1500人参与迁云项目——计划一年内，湖故把小红书的云量达数据湖搬上阿里云，彼时即便是业界体量最大的案例，也远小于小红书的本次迁移。
2024年5月，项目正式进入双跑阶段，作为切换到正式环境前最后的测试，是稳定性最大的保障。
在这一阶段，团队需要解决的问题数不胜数，每周平均新增500多个问题。
在阿里云团队的全力保障下，小红书技术团队顺利完成了割接，没有发生任何一个P2及以上故障。
2024年11月，小红书迁云项目正式宣告结束，在没有故障的情况下，迁移数据500PB，任务11万，参与人数1500人，涉及部门40多个。
相关文章
意媒：尤文很难签下穆阿尼，巴黎要价4000万欧且球员年薪700万欧
12月22日讯 据慢镜头网报道称，尤文很难签下穆阿尼，巴黎要价4000万欧且球员年薪700万欧。1998年出生的巴黎前锋穆阿尼已经被放上转会市场，他被恩里克排除出了球队的轮换名单，他已经在为冬窗寻找新2024-12-30
勒沃库森客战柏林联合首发：维尔茨替补，扎卡、希克、弗林蓬先发
11月30日讯 北京时间今晚22点30，德甲第12轮，勒沃库森客战柏林联合，赛前首发阵容公布。勒沃库森首发：1-赫拉德茨基、 3-因卡皮耶、 4-若纳坦-塔、 13-阿图尔、 12-塔普索巴、 20-2024-12-30
11月30日讯 西甲第15轮，巴萨vs拉斯帕尔马斯。比赛第49分钟，巴萨旧将桑德罗-拉米雷斯攻破旧主大门，巴萨主场0-1落后拉斯帕尔马斯。2024-12-30
11月30日讯 在本轮西甲巴萨对阵拉斯帕尔马斯的比赛中，拉菲尼亚取得进球。据统计，这已经是拉菲尼亚本赛季15场西甲打进的第9球，这已经在他生涯单赛季联赛进球数中位列第三。他曾在17/18赛季效力葡超吉2024-12-30
库杜斯解释庆祝动作：我们坐的木凳产自加纳，我想分享家乡的生活
12月22日讯 英超第17轮，西汉姆主场1-1战平布莱顿。第58分钟，库杜斯扳平比分。进球后，他和队友萨默维尔做起了自己经典的坐凳子庆祝动作，和以往不同的是，库杜斯这次坐的是一把木凳子。赛后采访中，库2024-12-30
德甲国家德比多特vs拜仁首发：凯恩PK吉拉西，特尔、萨内出战
12月1日讯 德甲第12轮国家德比，多特主场对阵拜仁，赛前首发公布。拜仁首发：1-诺伊尔、2-于帕梅卡诺、3-金玟哉、19-阿方索-戴维斯、27-莱默尔、6-基米希、8-格雷茨卡、10-萨内、39-特2024-12-30
最新评论