大家好,今天小编来为大家解答【业界最大数据湖0故障迁上阿里云!数据量达500PB】这个问题,很多人还不知道,现在让我们一起来看看吧!
快科技11月6日消息,今天阿里云宣布,小红书技术团队近日完成了一项业界前所未有的壮举,将业界最大数据湖0故障迁移至阿里云。
作为中国头部互联网公司之一,小红书月活用户已超过3亿,其数据湖存储了过去11年的所有原始数据,包括结构化、半结构化和非结构化数据。
随着业务的高速增长,小红书对在线处理数据的需求不断增加,同时离线处理所积累的历史问题也提高了切换的难度。
2023年11月,小红书共有1500人参与迁云项目——计划一年内,把小红书的数据湖搬上阿里云,彼时即便是业界体量最大的案例,也远小于小红书的本次迁移。
2024年5月,项目正式进入双跑阶段,作为切换到正式环境前最后的测试,是稳定性最大的保障。
在这一阶段,团队需要解决的问题数不胜数,每周平均新增500多个问题。
在阿里云团队的全力保障下,小红书技术团队顺利完成了割接,没有发生任何一个P2及以上故障。
2024年11月,小红书迁云项目正式宣告结束,在没有故障的情况下,迁移数据500PB,任务11万,参与人数1500人,涉及部门40多个。
以上就是【业界最大数据湖0故障迁上阿里云!数据量达500PB】相关内容,更多资讯请关注科技网
大家好,今天小编来为大家解答【专家称车企残酷竞争淘汰已在水面上:新能源车企不能把用户当韭菜】这个问题,很多人还不知道,现在让我们一起来看看吧!快科技11月8日消息,东北证券首席经济学家付鹏近日接受媒体采访时表示,中国当前在制造环节方面取得 ...
大家好,今天小编来为大家解答【全新腾势D9 DM实车曝光!搭载第五代DM混动 功率提升30千瓦】这个问题,很多人还不知道,现在让我们一起来看看吧!快科技11月8日消息,新款腾势D9 DM的申报图已在工信部网站曝光。从图中可以看到,新车将在外观细节上进行调 ...
大家好,今天小编来为大家解答【体验 iMac M4 后,我发现了苹果的小心思和乔布斯的影子】这个问题,很多人还不知道,现在让我们一起来看看吧!2001 年,《老友记》第七季正在美国播出,斩获了约 2000 万平均收视人数,位列当年全美电视节目收视率的前五名 ...
大家好,今天小编来为大家解答【百度将发布AI眼镜,首搭中文大模型,售价或低于2100元】这个问题,很多人还不知道,现在让我们一起来看看吧!编译|依婷编辑|Panken智东西11月8日消息,智东西获悉,百度旗下小度科技将在下周二举行的百度世界大会上发布 ...
大家好,今天小编来为大家解答【壹号本发布全球首款AMD Zen5掌机飞行家F1 Pro!顶配超过1.2万元】这个问题,很多人还不知道,现在让我们一起来看看吧!快科技11月8日消息,壹号本在海外正式发布了首款基于AMD Zen5的掌机“飞行家F1 Pro”(OneXFly F1 Pro), ...
大家好,今天小编来为大家解答【大亏损裁员重重压力下,消息称英特尔将恢复免费咖啡供应提振士气】这个问题,很多人还不知道,现在让我们一起来看看吧!IT之家 11 月 8 日消息,英特尔如今面临业绩困境,2024 年 Q3 营收同比下滑 6%,创纪录亏损 166 亿美 ...
大家好,今天小编来为大家解答【前NASA航天中心主任Ellen Ochoa加入英伟达董事会】这个问题,很多人还不知道,现在让我们一起来看看吧!IT之家 11 月 8 日消息,英伟达任命美国航空航天局(NASA)资深人士 Ellen Ochoa 为董事,董事会规模扩大至 13 名成 ...
大家好,今天小编来为大家解答【字节跳动AI助手豆包开启视频生成内测】这个问题,很多人还不知道,现在让我们一起来看看吧!《科创板日报》7日讯,《科创板日报》记者独家获悉,字节跳动旗下大模型AI助手豆包正式推出视频生成内测,意味着继快手、商汤、M ...
大家好,今天小编来为大家解答【国内AI助手分水岭渐显:豆包、Kimi稳居前两名】这个问题,很多人还不知道,现在让我们一起来看看吧!原标题:字节大力出奇迹:豆包坐稳国产AI智能助手No.1|量子位智库月报分析师 刘萌媛量子位智库 | 公众号 AI123AllAI智 ...
大家好,今天小编来为大家解答【“听风者”扎克伯格】这个问题,很多人还不知道,现在让我们一起来看看吧!特朗普锁定大选胜局后,美国多家科技巨头的首席执行官(CEO)向他表示祝贺,并称希望与其展开合作。比如苹果CEO库克、谷歌CEO皮查伊先后在社交媒体 ...