英伟达推出更强大的升级款人工智能芯片 GH200:内存是 H100 的三倍
英伟达于周二发布了一款设计用于运行人工智能模型的新芯片,以抵挡包括 AMD、谷歌和亚马逊在内的竞争对手在 AI 硬件领域的挑战。
根据一些估算,目前英伟达在 AI 芯片市场占有超过 80% 的份额。该公司专攻图形处理单元(GPU),已成为支撑生成式 AI 软件(如谷歌的 Bard 和 OpenAI 的 ChatGPT)的较大型 AI 模型的首选芯片。然而,由于科技巨头、云服务提供商和初创公司争夺 GPU 能力来开发自己的 AI 模型,英伟达的芯片供应短缺。
英伟达的新芯片 GH200 与公司目前最高端的 AI 芯片 H100 采用相同的 GPU。但是,GH200 将该 GPU 与 141GB 的尖端内存以及 72 核的 ARM 中央处理器配对。
英伟达 CEO 黄仁勋在周二的一次演讲中表示:「我们给这个处理器做了增强。」他还补充道:「这个处理器专为全球数据中心的规模而设计。」
据黄仁勋称,这款新芯片将于明年第二季度在英伟达的经销商处面市,并将在年底前供样品测试。英伟达代表拒绝透露价格。
通常,使用 AI 模型的过程分为训练和推理至少两个部分。
首先,使用大量数据对模型进行训练,这个过程可能需要数月时间,有时需要像英伟达的 H100 和 A100 芯片那样的成千上万个 GPU。然后,将模型用于软件中进行预测或生成内容,这个过程称为推理。与训练一样,推理需要大量的计算资源开销,并且每次软件运行时都需要大量的处理能力,比如生成文本或图像时。但与训练不同的是,推理几乎是持续进行的,而训练只有在需要更新模型时才需要进行。
黄仁勋表示:「你可以选择几乎任何大型语言模型放入其中,它将以令人惊讶的速度进行推理。大型语言模型的推理成本将大幅降低。」
英伟达的新 GH200 芯片专为推理而设计,因为它拥有更大的存储容量,可以将更大的 AI 模型放置在一个单独的系统上,英伟达副总裁 Ian Buck 在周二与分析师和记者的电话会议上表示。英伟达的 H100 内存容量为 80GB,而新的 GH200 为 141GB。英伟达还宣布推出了一个将两个 GH200 芯片结合成一台计算机的系统,以运行更大的模型。
Buck 说:「更大的存储容量使得模型可以常驻在单个 GPU 上,无需多个系统或多个 GPU 来运行。」
此次宣布正值英伟达的主要 GPU 竞争对手 AMD 最近发布了自己的 AI 芯片 MI300X,该芯片支持 192GB 的内存,被市场推广为适用于 AI 推理。包括谷歌和亚马逊在内的公司也正在设计自己的定制 AI 芯片用于推理。
截至目前,盘点搭载X轴线性马达的欧加系手机,共47款
【1】OPPOFindX2Pro搭载高通一代神U骁龙865处理器,采用台积电7nm的工艺制程,性能和功耗表现达到一个完美的平衡,无论日常还是游戏,表现都非常不错正面是一块6.7英寸的三星E3发光材料的AMOLED柔性曲面屏,支持2K的分辨率,色彩更加绚丽,显示效果更加细腻,还支持120Hz的刷新率,每秒呈现120帧画面,带来细腻流畅的舒适享受站长网2023-05-25 07:27:0400041百度APP推出「短剧」频道 汇聚上千部精品短剧
站长之家(ChinaZ.com)2月7日消息:为了满足广大用户的需求,百度APP特别推出「短剧」频道,汇聚了上千部精品短剧,涵盖甜宠、穿越、逆袭、霸宠、虐恋、重生等多元题材。用户只需在APP内搜索「短剧」或点击相应频道,即可畅享这些精彩作品。站长网2024-02-07 08:30:230000视觉中国 AI 创意工具 “风格转换” 功能升级 已支持三种风格转换
视觉中国宣布AI创意工具“风格转换”功能升级,现在支持三种风格类型:扁平、卡通和二次元。用户可以通过这个功能将摄影图片转换为插画,实现一键画风创意扩展。今年5月,视觉中国正式上线了AI创意工具功能,可以通过模特转换、插画转换功能在线对版权图片进行二次创作。在用户下载二次创作的图片并确认付费后,原版权图片的创作人依然可以获得相应分成收益。站长网2023-09-12 09:47:420000百度百家号百+全新定向能力上线 支持同一素材同一时间多次加热
今日,百家号宣布,为提升使用体验和投放效果,便于创作者更好地使用内容加热功能,百进行了升级优化。其中,全新定向能力上线:支持自定义选择用户性别、年龄、地域及兴趣标签。投放方法:在投放设置页面「投放方式」模块,支持选择「系统智能推荐」或「自定义定向投放」:选择「系统智能推荐」,将通过对内容特征标签与用户特征标签的智能匹配为内容加热;站长网2023-07-19 19:53:490001不做Sora背后:百度的多模态路线是什么?
当ChatGPT掀起国内“百模大战”,百度率先交卷文心一言。Sora再掀视频生成风潮,却传出李彦宏内部讲话“Sora无论多么火,百度都不去做”。一时间,困惑、不解、争议,纷至沓来。面对这些声音,在刚刚结束的百度世界大会会后采访中,李彦宏公开回应。他不仅重申了不做Sora的决定,并且说明了百度是如何运用和发展多模态的。0000