亚马逊自研 AWS 芯片在生成式人工智能领域追赶微软和谷歌
在德克萨斯州奥斯汀一个没有标记的办公大楼里,两个小房间中有几个亚马逊员工正在设计两种微芯片,用于训练和加速生成式人工智能。这些定制芯片——Inferentia 和 Trainium,为 AWS 客户提供了一种训练其大型语言模型的替代方案,而这些模型在 GPU 采购上变得越来越困难和昂贵。
亚马逊网络服务(AWS)首席执行官 Adam Selipsky 在六月接受采访时表示:「全世界都想要更多用于生成式人工智能的芯片,无论是 GPU 还是我们自己设计的亚马逊芯片。我认为,我们在为客户提供所需容量方面比任何其他公司都更具优势。」
然而,其他公司已经更加迅速并投入更多资金来抓住生成式人工智能的商机。当 OpenAI 于 11 月发布 ChatGPT 时,微软因为托管这个病毒式聊天机器人并投资据报道达 130 亿美元而受到广泛关注。微软迅速将生成式人工智能模型加入自己的产品中,并在二月份将其纳入必应搜索引擎。
同月,谷歌推出了自己的大型语言模型 Bard,并投资了 OpenAI 的竞争对手 Anthropic 3 亿美元。
直到四月,亚马逊才宣布推出自己的大型语言模型家族 Titan,以及一个名为 Bedrock 的服务,帮助开发人员利用生成式人工智能增强软件。
「亚马逊不习惯追逐市场,亚马逊习惯创建市场。我认为长时间以来,它们首次发现自己处于被动地位,并努力追赶进度,」咨询公司 Gartner 的副总裁分析师 Chirag Dekate 表示。
Meta 最近也发布了自己的 LLM——Llama 2。这款开源的 ChatGPT 竞争对手现在可以在微软的 Azure 公共云上进行测试。
芯片作为「真正的差异化」
Dekate 说,从长远来看,亚马逊的定制芯片可能在生成式人工智能领域给它带来优势。
他说:「我认为真正的差异化是他们所拥有的技术能力。你猜怎么着?微软没有 Trainium 或 Inferentia。」
AWS 从 2013 年开始悄悄地生产定制芯片,首先推出了一款名为 Nitro 的专用硬件。如今,这是 AWS 体量最大的芯片。亚马逊告诉 CNBC,每台 AWS 服务器至少有一颗 Nitro 芯片,总共使用超过 2000 万颗。
2015 年,亚马逊收购了以色列芯片初创公司 Annapurna Labs。然后在 2018 年,亚马逊推出了基于 Arm 架构的服务器芯片 Graviton,这是与 AMD 和英特尔等巨头的 x86 CPU 相竞争的一款产品。
「目前 ARM 芯片可能占总服务器市场总销售额的个位数甚至 10%,而且其中一大部分会卖给亚马逊。所以从 CPU 方面来看,他们做得相当不错,」Bernstein Research 的高级分析师 Stacy Rasgon 说道。
2018 年,亚马逊推出了面向人工智能的芯片。这是谷歌宣布推出第一款 Tensor 处理器单元(TPU)的两年后。据报道,微软目前正在与 AMD 合作开发名为 Athena 的人工智能芯片,但尚未正式宣布。
CNBC 参观了亚马逊在德克萨斯州奥斯汀的芯片实验室,那里是 Trainium 和 Inferentia 的开发和测试地点。产品副总裁 Matt Wood 解释了这两款芯片的应用。
他说:「机器学习可以分为两个不同的阶段。你首先训练机器学习模型,然后对这些训练好的模型进行推理。」「相对于 AWS 上训练机器学习模型的任何其他方式,Trainium 的性价比提高了约 50%。」
Trainium 于 2021 年首次上市,此前在 2019 年发布的 Inferentia 已经进入第二代。Inferentia 使客户能够以非常低的成本、高吞吐量、低延迟运行机器学习推理。「当你输入提示到你的生成式人工智能模型中时,所有的预测都是在那里处理的,」Wood 说。
然而,就目前而言,英伟达的 GPU 在训练模型方面仍然占主导地位。今年 7 月,AWS 推出了由英伟达 H100s 驱动的新型人工智能加速硬件。
Rasgon 说:「英伟达芯片拥有一个庞大的软件生态系统,已经建立了超过 15 年的时间,其他公司都没有。对于目前的人工智能来说,最大的赢家是英伟达。」
然而,AWS 在云计算领域的主导地位是亚马逊的一个重要优势。
「亚马逊不需要赢得头条新闻。亚马逊已经拥有非常强大的云计算用户群体。他们只需要找出如何让现有客户利用生成式人工智能扩展价值创造活动,」Dekate 说。
在选择用于生成式人工智能的亚马逊、谷歌和微软之间,有数百万的 AWS 客户可能会被亚马逊吸引,因为他们对亚马逊已经很熟悉,正在运行其他应用程序并将数据存储在那里。
AWS 是全球最大的云计算提供商,在 2022 年拥有 40% 的市场份额,根据技术行业研究机构 Gartner 的数据。尽管近三个季度的运营收入同比下降,但 AWS 在第二季度的运营利润中仍占据了亚马逊整体 77 亿美元运营利润的 70%。AWS 的运营利润率历史上一直远远高于谷歌云。
AWS 还拥有日益增长的面向生成式人工智能的开发者工具组合。
让我们把时间倒回到 ChatGPT 之前。AWS 数据库、分析和机器学习副总裁 Swami Sivasubramanian 说:「这并不是说在那件事发生后,我们突然匆忙地想出了一个计划,因为你不可能在那么短的时间内设计出一个芯片,更不可能在 2 到 3 个月的时间内构建出 Bedrock 服务。」
Swami Sivasubramanian 说:「Bedrock 让 AWS 客户可以访问由 Anthropic、Stability AI、AI21 Labs 和亚马逊自己的 Titan 开发的大型语言模型。我们不相信一个模型就能统治世界,我们希望我们的客户能从多个供应商那里获得最先进的模型,因为他们要为正确的工作选择正确的工具。」
亚马逊最新的人工智能产品之一是 AWS HeAlthScribe,这是一个在七月推出的服务,利用生成式人工智能帮助医生起草患者就诊总结。亚马逊还有一个名为 SageMaker 的机器学习中心,提供算法、模型等。
另一个重要工具是编码辅助工具 CodeWhisperer,亚马逊表示该工具使开发人员的任务平均完成时间提高了 57%。去年,微软也报道了其编码辅助工具 GitHub Copilot 带来的提升生产力的情况。
六月,AWS 宣布成立了一个价值 1 亿美元的生成式人工智能创新「中心」。
「我们有很多客户表示,『我想进行生成式人工智能』,但他们并不清楚这对他们自己的业务意味着什么。因此,我们将派遣解决方案架构师、工程师、战略家和数据科学家与他们一对一合作。」AWS 首席执行官 Selipsky 说。
尽管迄今为止 AWS 主要专注于工具而不是构建与 ChatGPT 竞争的产品,但最近泄露的内部电子邮件显示,亚马逊首席执行官安迪·贾西 (Andy Jassy)直接监督着一个新的中央团队,正在构建更广泛的大规模语言模型。
在第二季度的盈利电话会议上,贾西表示,AWS 业务的「很大一部分」现在由人工智能推动,提供了 20 多个机器学习服务。一些客户案例包括飞利浦、3M、Old Mutual 和汇丰银行。
人工智能的爆炸性增长伴随着许多公司担心员工将专有信息放入用于公共大型语言模型的训练数据中的一系列安全问题。
「我无法告诉你有多少财富 500 强企业告诉我他们禁止使用 ChatGPT。因此,我们通过我们对生成式人工智能的方法和我们的 Bedrock 服务来保障客户的需求。通过 Bedrock 使用的任何模型都将位于您独立的虚拟私有云环境中,并进行加密,同时具备相同的 AWS 访问控制。」Selipsky 说。
目前,亚马逊只是在加速推进生成式人工智能,告诉 CNBC 称,「超过 100,000」个客户如今正在使用亚马逊的机器学习。尽管这只是 AWS 数百万客户中的一小部分,但分析师表示这种情况可能会发生改变。
「我们没有看到企业说,『哦,等等,微软在生成式人工智能领域领先,我们就切换基础设施策略,将一切迁移到微软上。』」Dekate 说。「如果您已经是亚马逊的客户,很有可能会广泛探索亚马逊的生态系统。」
扎克伯格偷袭马斯克!Meta发布Threads社交App:对标推特
快科技7月6日消息,最近一段时间,马斯克的推特大乱,因为平台被大数据抓取,马斯克通过限制推特用户浏览量来防止AI公司偷数据,如果想多看只能花钱开通TwitterBlue,此举被众多用户吐槽。万万没想到的是,在推特大乱时,扎克伯格偷袭”马斯克,Meta趁虚而入直接发布了一款对标推特的社交AppThreads。站长网2023-07-06 14:58:350002一年狂赚1762亿元!大众全年交付924万辆汽车
快科技3月3日消息,日前,大众汽车发布了2023年四季度及全年财报。数据显示,2023年,大众集团销售收入增长15%,达到3223亿欧元,集团的营业利润仍保持在226亿欧元(约合人民币1762.9亿元)(2022年:225亿欧元)。交付方面,大众汽车集团共交付汽车约924万辆,不及丰田,为全球汽车销售季军,后者2023年全球销量为1120万辆。0000方便了!明天起香港/深圳乘车码互认互通:支付宝就能刷
快科技5月31日消息,今天支付宝官方宣布,明日起深港公交地铁将实现乘车扫码互联互认互通。在深圳市交通运输局的指导下,深圳市深圳通有限公司与支付宝、AlipayHK等公司合作升级深港交通支付互认功能。据介绍,自2023年6月1日起,使用深圳通、AlipayHK(港版支付宝)、支付宝中任意一个APP,即可在深港两地扫码乘坐公交和地铁。0004亚马逊宣布推出新的人工智能芯片「Trainium2」,深化与英伟达的合作关系
亚马逊的云计算部门AWS宣布推出新的芯片,供客户构建和运行人工智能应用程序,同时计划提供对Nvidia最新芯片的访问。亚马逊AWS服务致力于作为云提供商脱颖而出,提供多种成本效益高的选项。它不仅销售廉价的亚马逊品牌产品。与其在线零售市场一样,亚马逊的云服务还将提供其他供应商的顶级产品,包括来自顶级AI芯片制造商Nvidia的备受追捧的GPU。站长网2023-11-29 10:48:340000字节跳动旗下云服务火山引擎数智平台VeDI发布AI助手
字节跳动旗下云服务火山引擎在V-Tech数据驱动科技峰会上推出了火山引擎数智平台VeDI的AI助手。通过接入人工智能大模型,该AI助手可以帮助企业提升数据处理和查询分析的效率。即使是不会写代码的运营人员,也可以通过与大模型对话的方式进行业务运营数据的取数、看数和归因分析。目前,VeDI相关数据产品已经启动邀测。站长网2023-09-19 15:55:440000