MLPerf放榜!AI芯片公司墨芯人工智能再夺MLPerf大模型推理三项冠军
站长网2023-09-15 09:32:080阅
要点:
MLPerf公布最新GPT大模型推理测试结果,墨芯人工智能S30计算卡单卡、4卡、8卡的算力均获得第一。
墨芯通过独创的双稀疏算法与硬件协同设计,在GPT-J大模型上取得1.8倍于英伟达H100的性能优势。
墨芯的成绩证明,稀疏计算是大模型时代算力发展的关键,可根本解决大模型参数增长与算力瓶颈的矛盾。
最新MLPerf推理测试结果公布,墨芯人工智能再次夺冠,其S30计算卡在GPT-J大模型的单卡、4卡、8卡推理性能均位居第一。此前墨芯已在MLPerf上连续两届夺冠。

在60亿参数GPT-J模型上,墨芯通过独创的双稀疏算法与硬件协同设计,实现了高达1.8倍于4nm制程英伟达H100的性能优势。
墨芯的成绩证明,稀疏计算技术是大模型时代的关键,可减少模型计算量,缓解算力需求激增、功耗过大等痛点,为大模型在参数量层面取得飞跃提供可能。墨芯已推出支持多种大模型的AI计算平台,性能高、效率优。
业界认为,墨芯等稀疏计算创新,将引领大模型应用深入各行各业。MLPerf成绩是对墨芯产品实力的肯定,也印证稀疏计算将助力大模型算力实现根本性变革。
0000
评论列表
共(0)条相关推荐
“蓝鸟”价值17万元:二手市场出现旧推特Logo iPhone 11
快科技7月31日消息,近日,马斯克将推特Logo改为字母X,遭到了不少用户的不满,也有用户选择放弃升级,坚守旧版本。但对于一些意外升级到新版本,但有想要老版本蓝鸟”Logo的用户来说,事情似乎已经难以找到解决的方法。近日,有用户在二手交易平台eBay发现,有用户上架了带有旧版推特的iPhone11ProMax,售价达到了夸张的2.5万美元(约合人民币17.9万元)。站长网2023-07-31 20:18:050000曝苹果可折叠iPhone开发暂停:供应商屏幕测试表现不佳
据最新报道,苹果公司已暂停了可折叠iPhone的开发,原因是其供应商的屏幕未能通过公司严格的测试标准。此前,有媒体透露,苹果正在秘密研发至少两款翻盖可折叠iPhone原型机,这些手机采用纵向折叠设计,支持悬停功能,当展开至90度角时,用户无需支架即可进行拍照。站长网2024-02-18 08:56:180002美国成年人中只有 14% 尝试过 ChatGPT:十分之一用于工作
根据皮尤研究中心在三月份进行的一项调查,大约六成美国成年人(58%)熟悉ChatGPT,尽管很少有人亲自尝试过。在那些尝试过ChatGPT的人中,大多数报告认为它至少有些用处。站长网2023-05-25 17:34:010000人类发起AI选美比赛,还让AI做评委,结果被网友骂惨了!
一场由人类发起、让AI和人类共同做评审的AI选美大赛,迟迟未能公布结果。这让这场原本就备受争议的“世界首场AI选美盛事”,显得更像一场无厘头的恶搞。一个月前,英国订阅社交平台Fanvue宣布将推选首个世界AI小姐,以表彰令人眼花缭乱的数字明星。为增加权威度,Fanvue还特地与世界人工智能创造者大奖(WAICA)合作共同揭幕。站长网2024-05-28 07:25:120000微软携手风险投资公司,为初创企业提供免费AI芯片资源
划重点:-微软计划与风险投资公司合作,为初创企业提供免费的Azure基础设施,用于训练人工智能模型。-该计划首先针对YCombinator和M12等初创企业提供NvidiaGPU虚拟机集群,以训练和运行生成模型。-微软希望通过此举降低初创企业训练和运行AI模型的门槛,同时推动Azure云平台的使用。站长网2023-11-08 16:58:020000