算力管理复杂、训练成本过高,专家谈AI困境如何破解 焦点
2024-06-30 09:58:53来源:中国新闻网
发布会现场。供图
近日,在蚂蚁数科举行的一场发布会上,中国信息通信研究院云大所副所长栗蔚指出,云原生凭借其高可用、弹性、可扩展等优势成为突破AI困境的关键,云原生PaaS平台的大模型产品工具链不断完善,将加速大模型技术在行业应用中落地。
栗蔚表示,根据调研,云原生除了作用于AI之外,之前它作用于很多互联网应用的研发,超过一半中国企业大部分互联网化应用程序都是云原生的架构,甚至传统的核心架构现在也都在云化。
据介绍,在AI时代,因为大模型对算力需求很大,GPT3.5的时候是1750亿参数,需要500个英伟达的卡,到了GPT5是10万亿的参数,需要50万张英伟达的卡。这种情况下,云将发挥出新的关键作用。
“50万张英伟达卡计算是不可能在一个数据中心完成的,所以很多大模型计算跨域不可避免,但跨域以后对方是英伟达的卡吗?或者智算底层基础设施都不一定。这种情况下,我们需要什么?中间谁能把应用部署在算力上跑起来呢?”
栗蔚给出答案,她认为,就是云,AI时代几个发展瓶颈问题基本都是要靠云原生满足的。云原生屏蔽了底层算力的差异,其应用不在乎你底下是CPU还是GPU,还是用了什么样的规格的卡,我只是将应用部署在上面,用你的计算能力,所以云原生发挥了这样的作用。
“很多企业通过用了云原生,对于底下上千台服务器进行统一的纳管,从而全方位提升效率和降低成本。”栗蔚强调,云跟AI结合才能充分降低AI的工程化成本,让AI大模型真实地跑起来变成服务。(完)
关键词:
责任编辑:hnmd004
- 算力管理复杂、训练成本过高,专家谈AI困境2024-06-30
- 取消预约、发放消费券……暑期旅游这些“省2024-06-30
- 讯息:前5月快递业务量同比增长24.4%2024-06-30
- 深度数科:探索数字技术创新与应用 推动票2024-06-29
- PonyHR与物业行业百强企业世茂物业签约,共2024-06-29
- 安徽歙县:灾后清理重建保民生 世界即时看2024-06-29
- 中国影协民营电影制片人培训班杭州开班 首2024-06-29
- 天天微资讯!美官员:本轮巴以冲突期间 美2024-06-29
- 中方:坚决反对美方在朝鲜半岛问题上对中方2024-06-29
- 中国驻英大使致信祝贺旅英香港同胞社团成功2024-06-29
- 环球信息:国际锐评丨从“历史答案”到“时2024-06-29
- 哪一个是产能过剩?2024-06-29
- 后人追忆留法勤工俭学:从这里走向世界_信2024-06-29
- 当前速看:南方强降雨不休 雨带维持在长江2024-06-29
- 教育部发布提示:高校招生录取期间谨防这几2024-06-29
- 设计上海丨Enjoy Scent 隐迹香氛SIS嗅觉2024-06-29
- 青海盐湖2万吨碳酸锂项目太阳能供热工程全2024-06-29
- 田茂华:链接更多企业与用户 共同推进好房2024-06-29
- 驻马店市驿城区老河乡第十二届人民代表大会2024-06-29
- 世界滚动:泌阳县人大常委会开展水污染防治2024-06-29
- 嘉盛环境工商两用转轮除湿解决方案,守护食2024-06-29
- 嘉盛环境工商两用转轮除湿解决方案,守护食2024-06-29
- 捷丰制药行业除湿解决方案:保障药品安全与2024-06-29
- 捷丰电池行业除湿解决方案:助力电池生产节2024-06-29
- DingPay Wallet:提供全方位安全存储解决方案2024-06-29
- 国窖1573“世界因你而美丽——2023-2024影2024-06-29
- LD x Marcel Wanders大师系列 | 解放2024-06-28
- 紧绷防范弦 织牢反诈网——西平法院筑牢2024-06-28
- 全球信息:驻马店市驿城区橡林街道办事处召2024-06-28
- 天天资讯:西平县应急管理局持续开展“清2024-06-28