商汤与上海AI实验室等发布“书生通用大模型体系”
站长网2023-07-08 17:01:050阅
在昨日的第六届世界人工智能大会上,商汤科技与上海人工智能实验室联合香港中文大学、复旦大学、上海交通大学及清华大学发布全新升级的“书生通用大模型体系”,包括:“书生·多模态”、“书生·浦语”和“书生·天际”三大基础模型,以及首个面向大模型研发与应用的全链条开源体系。
其中,“书生·多模态”大模型无缝整合了语言、图像、视频等多种模态,包含200亿参数,使用80亿多模态样本训练。
“书生·多模态”首次实现通过自然语言定义视觉任务,实现开放世界理解,支持多模态生成和跨模态交互,并支持350万语义标签的识别和理解,覆盖开放世界常见的类别和概念。目前,书生体系在80多种多模态和视觉评测任务中性能领先。
升级后的 “书生·浦语”是国内首个正式发布的支持8K语境长度的千亿参数级语言大模型,在包含1.8万亿token的高质量语料上训练而成。
在全面升级同时,书生·浦语还正式开源一个70亿参数的轻量级版本InternLM-7B。InternLM-7B在包含40个评测集的全维度评测中性能表现卓越、均衡,全面领先现有开源模型。特别在两个被广泛采用的基准MMLU和CEval上分别取得50.8和52.8高分,刷新了7B量级模型世界纪录。
此外,书生·浦语还开源了贯穿数据、预训练、微调、部署和评测五大环节的全链条工具体系。
(https://github.com/InternLM)
0000
评论列表
共(0)条相关推荐
大模型恋爱神器!16种MBTI自由定制,北大ChatLaw团队出品
北大团队新作,让大模型拥有个性!而且还是自定义那种,16种MBTI都能选。图源备注:图片由AI生成,图片授权服务商Midjourney这样一来,即便是同一个大模型,不同性格下的回答都不一样。比如提问:你周末喜欢干什么?ENFP的大模型会说:喜欢参加社交活动,结识新朋友。INFJ的大模型则回答:喜欢独自读过。这样能干啥呢?北大的童鞋们列出来了一些情景:0000雷军发长文讲述造车心路历程:小米汽车各种泄密不是本意
小米汽车技术发布会即将到来,雷军在社交媒体上再次发文,提前剧透了发布会的一些内容。雷军表示,小米汽车自2021年3月30日宣布造车以来,吸引了全行业的优秀人才,从五湖四海集结到小米汽车的旗帜下。他给自己定了一个目标,要开满100辆车,认真学习每一辆车的优点和出色的长板。目前,这个目标已经超额完成,已经开了超过150辆车。站长网2023-12-26 10:14:3000002023胡润世界500强发布:理想汽车首次获评 估值3100亿元
近日,胡润研究院联合金融机构百富众鑫,发布一份《2023胡润世界500强》,该榜单列出了全球500家最具价值的非国有企业。在这份榜单中,中国企业表现出色,共有33家企业上榜。其中,理想汽车以3100亿元估值首次跻身世界500强行列,成为最年轻的世界500强企业之一。站长网2024-02-05 14:00:210000微软 OneDrive 将迎来全新升级:Copilot 将为用户提供更多 AI 功能
站长之家(ChinaZ.com)10月8日消息:微软日前宣布将对OneDrive进行更新,旨在使人们更容易访问、查看、分享和管理他们的文件。在本周的在线活动中,被称为「微软OneDrive:文件管理的未来已经来临」,微软公司公布了其在线文件存储服务的计划,其中一些已经对特定用户生效,而其他一些将在今年晚些时候或明年初开始推出。站长网2023-10-08 15:13:410000AIGC明星独角兽爆雷!7亿融资烧大半,拖欠员工工资,创始人被扒得千疮百孔
StableDiffusion背后团队创始人,被曝巨大丑闻!这两天,福布斯发布的一则长新闻在网上病毒式传播:30多位前员工投资人现身说法,细数StabilityAI老板EmadMostaque(伊玛德·莫斯塔克)9大罪证——学历造假,根本没有取得牛津大学硕士学位;把StableDiffusion的10亿代码成果“据为己有”;拖欠大量员工工资,甚至不交工资税;……站长网2023-06-12 11:06:230000