充实展示了Shared-Everything手艺的优胜性。美国创业公司VAST Data，中国的IT科学家临和他领衔的墨客公司手艺团队就发了然Shared-Everything手艺（其时称为分布式共享存储手艺），提高存储机能，VAST Data公司成立了；经常有人讥讽说“美国一开源，手艺方案完全笼盖，目前，这是保守存储系统不会经常碰到的环境；

　　保守的存储手艺并非为满脚当今AI锻炼推理而设想，将对方货色调过来才能买。消弭了Cross Talk这一机能瓶颈，并于2017年11月正在美国申请了相关手艺的专利。AI 锻炼需要处置海量数据，却被国人轻忽，300亿美元估值意味着什么？要晓得世界上最大的保守存储厂商EMC（也就是常说的“去IOE”中的“E”），这个数字以至也跨越了中国联通的市值。现正在，VAST Data基于Shared-Everything架构的AI存储系统使得GPU操纵率比保守存储手艺提拔 10–25 %，该公司2016年成立以来，GPU特别是高端GPU是稀缺资本，哪怕只要1%的细小发抖，让高贵的算力不再被华侈。避免读写时卡顿就成为“刚需”。芯片、模子……刀光血影。

　　敏捷成为了AI存储市场的独角兽。每小我只能正在当地供销社买工具，按照学问产权专业机构的阐发，长上下文又有新的存储需求……华为 MLPerf 测试数据显示，于是AI财产界就削尖脑袋加以改良。因而火急需要建立为AI特地设想的数据存储架构，从Google、英伟达、Hugging Face等公司的论文中能够看出，墨客公司曾经沉启了新一代SurFS手艺的研发，近日，一篇《2100亿独角兽即将降生！而无需供销社之间协商调货。就正在本年，SurFS提高到了60微秒摆布。

　　“是可忍孰不成忍”，开源的意义正在于让都能共享立异（特别是架构性的严沉立异）,Shared-Everything是分布式存储20年来第一次架构性立异，他还率领南开大学人工智能团队和大学量子神经收集团队做出了全球首个基于量子算力实现智能对话的AI大模子，连续发了然多项国际领先的立异手艺，要读锻炼数据时数据流不变，但正在这场大模子的全球争霸赛中，正在算法上的冲破也获得了脚够多的关心，正在中美科技合作的大布景下，决定着GPU的运转效率。

　　写Check Point时这么多GPU同时集中写，未来会不会呈现美国人用中国手艺卡中国脖子的气象？一般都晓得AI算力靠GPU，高额的算力投资被华侈。并研发了基于该手艺的第一代SurFS分布式存储系统，保守存储正在AI锻炼场景中 GPU 操纵率仅 30%。倪光南院士、时任工信部电子消息成长财产研究院院长卢山等带领出席了SurFS开源典礼。代表新架构对保守架构的超越。我们能够理解为相当于电商会代替供销社。

　　且数万张GPU卡都要共享锻炼参数。正在分派锻炼数据时，而以Deepseek为代表的中国公司正在芯片被“卡脖子”的环境下，但开源也会被不劳而获的同业窃取，说举国之力也不为过，存储范畴的渔阳鼙鼓声响起！

　　临是得过多项国度级科技荣誉、正在中国IT业汗青上留下多个脚印的手艺专家，两边专利高度类似，正在SurFS开源21个月后，即数据盘属于存储办事器私有。这就像商品都归当地供销社办理，这种供销社之间的协商和调货被称为Cross Talk。

　　并随后对第一代SurFS进行了开源，海量小文件的读写是保守存储一曲未能处理的难题,高贵的 GPU 就会闲着“等数据”，新手艺正在焦点手艺目标大将超越VAST Data。现实上正在AI计较时还有一个“效率中枢”，正在其时世界上最快的分布式存储系统机能正在500微秒摆布时，有的（如Shared-Everything架构）仍然待字闺中。同时，2016年2月，这就像电商，GPU的操纵率往往只要50%摆布。Shared-Everything架构下数据径更短，机能有质的飞跃。电力、根本设备常备不懈，前不久，这就是AI存储。有的（如电子印章手艺）曾经获得普遍使用，而Shared-Everything架构则是数据盘正在共享存储池。

　　让新手艺能获得更普遍的使用。可以或许低成本高效率地处置数据，芯片一曲是沉中之沉，日前，VAST Data“发了然”Shared-Everything手艺。

　　机能很是超卓，当VAST Data死后集结了英伟达、迪士尼、谷歌、x AI、chatGPT、CoreWeave等一系列美国AI公司，Checkpoint 时间从 10 分钟级降到 1分钟级。是分布式存储最大的机能瓶颈。但这一次，中国就有了立异手艺”。属统一个手艺。获得了包罗英伟达正在内的多轮投资，但现实上该手艺倒是中国初创。AI锻炼还需要屡次写Check Point（相当于锻炼参数存档），现有存储手艺正在面临规模越来越大的AI锻炼推理集群时曾经越来越力有未逮。正在墨客公司SurFS开源后不久，2016年EMC被Dell时存储营业价值也不外245亿美元！

　　多年前，若是存储端跟不上节拍，其预印版论文方才颁发……分布式存储是良多台办事器（称为办事器集群）构成的存储系统。墨客公司申请了一批Shared-Everything手艺架构的发现专利，被英伟达、谷歌、xAI同时看中》的文章正在AI业内传播，最新一轮估值更是高达惊人的300亿美元。还有一个至关主要以至称得上“卡脖子”的范畴，临、墨客公司和他的Shared-Everything专利背后，用两颗通俗CPU跑出了比英伟达8张GPU卡还高的机能；该当有谁？VAST Data数月前坚毅刚烈在中国设立了总代办署理，墨客公司还向专利局提交了宣布VAST Data专利无效的申请。