2月26日讯 华为云CTO张宇昕在巴塞罗那华为云峰会表示,大模型时代对算力有着全新的要求:
1、联算比。未来需要全新的网络互联技术来解决运算量和GPU算力之间的巨大差距。
2、容算比。当前在模型训练过程中为获取足够显存容量,存在不必要的GPU算力闲置。
3、存算比。当前在模型训练过程中,大量的时间消耗在GPU数据加载,造成算力的进一步浪费。
基于此,云的系统架构将从“以CPU为中心的主从架构”向“多元算力对等架构” 跃迁,突破算力、存储和网络的边界,实现多元算力的对等全互联。
责任编辑:王超
免责声明:
中国电子银行网发布的专栏、投稿以及征文相关文章,其文字、图片、视频均来源于作者投稿或转载自相关作品方;如涉及未经许可使用作品的问题,请您优先联系我们(联系邮箱:cebnet@cfca.com.cn,电话:400-880-9888),我们会第一时间核实,谢谢配合。