中科院正打造“紫东太初”2.0全模态大模型 实现图像、文本、语音三模态相互生成
站长网2023-05-08 15:20:441阅
在今天的华为昇腾AI开发者峰会上,中国科学院自动化研究所“紫东太初”大模型研究中心常务副主任、武汉人工智能研究院院长王金桥博士介绍了“紫东太初”2.0全模态大模型。
该模型由自动化所和武汉人工智能研究院联合打造,基于华为全栈国产化软硬件平台昇腾AI和开源AI框架昇思MindSpore。
2021年7月,自动化所发布了全球首个千亿参数多模态大模型“紫东太初”,实现了图像、文本、语音三模态数据间的“统一表示”与“相互生成”。
而新版的“紫东太初”2.0全模态大模型可以实现不同模态的统一表征和学习,包括文本、图片、语音、视频、3D点云和传感信号,同时优化了语音、视频和文本的融合认知以及常识计算等功能,进一步突破了感知、认知和决策的交互屏障。
此外,“紫东太初”大模型还开放了基于昇腾和昇思的3.8B图像-文本-语音多模态模型,并推出了紫东太初大模型服务平台。该模型已在多个行业场景领域显示出落地潜力,包括手语教学、法律咨询、交通出行、广电、医疗机器人和医学影像判读等。
0001
评论列表
共(0)条相关推荐
一块电池可供3600家用电一小时!特斯拉上海储能超级工厂开始招人
4月16日,快科技获悉,特斯拉官方日前宣布,特斯拉上海储能超级工厂开始招聘,岗位涵盖产品研发、智能制造、供应链、工业互联网研发等领域,工作地点均为上海临港。据了解,该工厂将规划生产特斯拉超大型商用储能电池(Megapack),计划于2023年第三季度开工,2024年第二季度投产。这座储能超级工厂将会是特斯拉全球范围内的第二座储能超级工厂,目前唯一一座投产的储能超级工厂,位于美国加利福尼亚州。0000苹果手机几乎没代言却”卖的“很好
一谈到明星代言手机的事情,大家肯定率先想到国产手机的oppo和vivo,明星代言是一个接一个!我都觉得自己也被代入了!苹果手机几乎没代言却卖的最好站长网2023-05-24 04:21:160000我在十一靠婚礼搞钱,8天赚3万
这个十一假期,不少人不是在举办婚礼,就是在参加婚礼的路上。十一向来是结婚旺季,抢占国庆档的新人们,也经历了“速度与财力”的考验。他们不仅提前半年甚至一年开始预约档期,还要面临金价、酒店、婚庆、“婚礼四大金刚(司仪、化妆师、摄影与摄像)”等环节的层层涨价。有数据显示,今年十一假期,全国婚庆的涨价幅度在10%-15%。站长网2023-10-01 21:51:140001在618“安静”的背后,是本地零售的崛起
今年618可能是有史以来最“安静”的一个电商购物节,安静到可能很多人都没有意识到它发生过。迄今为止,没有一家主流电商平台公布了整体GMV增速——从“传统的”阿里、京东,到近年来新兴的抖音、快手皆是如此,大家最多只公布了几个表现较好的品类增速而已。无论在社交媒体上,还是在我本人周围,618购物节的讨论热度都非常低;我自己甚至就算买东西比较多的了。0000