英伟达推出 AI 领域顶尖新芯片 HGX H200:以更高性能满足生成式 AI 需求
英伟达公司当地时间周一宣布,推出其 AI 工作的新一代顶级芯片 —— HGX H200。该新 GPU 在其广受欢迎的前代产品 H100 的基础上,实现了1.4 倍的内存带宽提升和 1.8 倍的内存容量增加,大幅提高了其处理密集型生成 AI 工作的能力。
然而,目前市场对于这些新芯片的可获得性仍存疑问,尤其是考虑到 H100 的供应限制。英伟达尚未就此问题提供明确答复。英伟达公司表示,首批 H200 芯片将于 2024 年第二季度发布,目前正与「全球系统制造商和云服务提供商」合作以确保芯片的可用性。英伟达发言人 Kristin Uchiyama 对生产数量不予置评。
除了内存之外,H200 在其他方面与 H100 大体相同。但内存的改进使其成为了一次有意义的升级。这款新 GPU 是首个使用新型、更快的 HBM3e 内存规格,将其内存带宽提高至每秒 4.8TB,相较于 H100 的 3.35TB 有显著提升,总内存容量也从 80GB 增至 141GB。
英伟达高性能计算产品副总裁 Ian Buck 在今天的视频演示中表示:「更快更大容量的 HBM 内存的整合,旨在加速包括生成 AI 模型和高性能计算应用在内的计算密集型任务的性能,同时优化 GPU 的利用率和效率。」
H200 还设计为与已支持 H100 的系统兼容。英伟达表示,云服务提供商在加入 H200 时无需进行任何改动。亚马逊、谷歌、微软和甲骨文的云服务部门将是明年首批提供新 GPU 的公司之一。
新芯片一经推出,定将售价不菲。虽然英伟达未公布其价格,但据 CNBC 报道,上一代 H100 的估计售价在每颗 25000 至 40000 美元之间,运行顶级水平的系统需要数千颗。Uchiyama 表示,定价由英伟达的合作伙伴决定。
随着 AI 公司仍然迫切寻找 H100 芯片,英伟达的这一公告具有重要意义。英伟达的芯片被视为高效处理生成图像工具和大型语言模型所需巨量数据的最佳选择。这些芯片足够珍贵,以至于有公司使用它们作为贷款的抵押。谁拥有 H100 成为硅谷的热门话题,初创公司甚至合作共享这些芯片的任何可用性。
Uchiyama 表示,H200 的推出不会影响 H100 的生产。「你将看到我们在今年增加整体供应,并且我们正在长期供应购买,」Uchiyama 在发给 The Verge 的电子邮件中写道。
展望明年,对于 GPU 买家来说或许是更加吉利的时期。英国《金融时报》今年 8 月报道称,英伟达计划在 2024 年将 H100 的产量增加三倍。目标是明年生产多达 200 万颗,相比之下 2023 年约为 50 万颗。但随着生成式 AI 的需求如今仍与年初一样旺盛,需求可能只会更大——这还不包括英伟达推出的更热门新芯片。
90后学霸斯坦福毕业,回国当“厂长”,一年卖出2个亿
“活着的意义是什么?”3年前,董凡铭辞去美国硅谷的高薪工作回到上海,想明白了这个问题后,便投身到了滚滚创业浪潮中。他认为“活着的意义”有三类:通过“消费”获得体验感;“创造”新事物获得成就感;承受“苦难”获得成长。“如果选择躺平,我就没法体验到创新和苦难带来的意义。去追寻有困难的事,并克服这些困难,这很有意义。”出生于1993年的董凡铭,阳光帅气、谦逊健谈,手握一副“人生好牌”。站长网2024-09-18 02:33:460000网易云十年听歌报告发布!网易云音乐正式上线十周年
今年是网易云音乐上线的第十周年,为此今日网易云上线了「十年听歌报告」,用户可以在网易云音乐APP搜索「十年报告」查收。在报告中,网易云音乐会统计出用户2017年至2023年的每个年度最爱的音乐,以及每个季度最喜欢的音乐。同时还会生成一个名为「十年精选辑」的歌单。据悉,网易云音乐是一款由网易开发的音乐产品,该产品2013年4月23日正式发布。站长网2023-04-21 14:23:06000112306账号莫名出现陌生人信息 官方解释:可能在第三方购过票
快科技2月5日消息,据媒体报道,近日多名网友称,自己的12306账号内出现陌生人信息,且无法删除。对此12306官方客服表示,可能是由于旅客在第三方平台购过票,或者帮别人点过加速包流量包,其实在这个过程中,或许第三方已经与你达成了协议,默认将自己的账号交给第三方使用了。并且由于铁路方面的保护规定,添加新人30天后才可以删除,所以才会出现无法删除陌生人信息的情况。站长网2024-02-05 20:25:590000欧盟希望最早今年为生成式 AI 制定新规则:拟设立「AI 制作」标签
欧盟委员会执行副主席玛MargretheVestager周一对NikkeiAsia表示,欧盟希望最早在今年就ChatGPT等生成式人工智能的全球规则达成一致。站长网2023-04-25 14:19:000001郭明錤:苹果已为下个月的首款头显发布「做好充分准备」
最近的报道一致认为,苹果将在6月的WWDC上展示其传闻已久的AR/VR头戴式设备,现在郭明錤的最新预测也支持这些传闻,这位行业分析师声称,该传闻「极有可能」,苹果公司已经「做好了充分准备」。此前,郭明錤表示,苹果已经将头戴式设备的生产推迟到2023年第三季度,因此,该设备可能不会在WWDC上推出,但是他现在似乎不再持有这种观点。站长网2023-05-16 11:09:470000