日本政府与科技巨头联手投资数亿美元开发日语语言模型
文章概要:
1. 日本政府与NEC、富士通、软银等主要科技公司正在合作投资数亿美元,旨在开发一款文化敏感的日语语言模型,超越现有的ChatGPT等模型,更好地体现日本文化和语言。
2. 这一新模型将在国家超级计算机Fugaku上进行训练,并计划于明年以开源形式发布,具备至少300亿个参数,预计性能明显优于现有模型。
3. 为了评估语言模型对日本文化的敏感度,研究人员开发了Rakuda排名,其中GPT-3.5目前排名第一,表现优异,但日本LLM在该排名中排名第四。
据最新报道,日本政府与NEC、富士通、软银等主要科技公司正共同投资数亿美元,旨在开发一款文化敏感的日语语言模型。这一举措旨在超越现有的ChatGPT等模型,更好地代表日本文化和语言,解决当前模型在日本市场上的一些不足之处。
由东京工业大学、东北大学、富士通和政府资助的 RIKEN 开发的日本 LLM 预计将于明年开源,并将拥有至少300亿个参数。

新的日语语言模型将使用国家超级计算机Fugaku进行训练,这将使其性能远远超越现有的模型。
研究人员指出,现有模型如ChatGPT存在一些问题,例如生成一些罕见的字符和未知单词,以及在文化上适当且礼貌的沟通规范方面存在不足。这些问题可能是由于日语具有多达48个字符的字母系统,以及汉字汉字的使用,每个字符都有不同的发音,以及大约50,000个很少使用的汉字。新模型的开发旨在解决这些问题,提供更准确和文化敏感的日语生成。
为了评估语言模型对日本文化的敏感度,研究人员还开发了Rakuda排名系统。根据排名结果,目前最优秀的开源日本LLM在该排名中排名第四,而GPT-3.5表现卓越,名列榜首。随着新模型的发布,预计其性能将明显超越目前的情况,使其成为更好的文化代表。
日本文部科学省正在建立一个更大的模型。该模型拥有至少1000亿个参数,也将基于日语并针对科学应用进行优化:根据已发表的研究,它将产生新的假设以加速研究。该模型将耗资约2亿美元,预计将于2031年向公众开放。
最近,日本文部科学省还发布了指导方针,允许小学、初中和高中有限地使用ChatGPT等生成式人工智能,以促进教育和研究领域的发展。这一举措显示了日本政府对人工智能领域的积极投资和支持。
CMU与Google DeepMind研究人员推出AlignProp:微调文本到图像扩散模型的创新方法
卡内基梅隆大学(CMU)和GoogleDeepMind的研究人员引入了一种突破性的方法,称为"AlignProp"。该方法利用直接反向传播来微调文本到图像扩散模型,解决了将这些模型与所需的奖励功能对齐的挑战。AlignProp提供了一种更高效和有效的方式来优化文本到图像扩散模型,适用于图像生成等领域。项目地址:https://align-prop.github.io/站长网2023-10-18 21:12:450001动视暴雪将支付 5400 万美元和解加州工作场所歧视诉讼
##划重点:1.💰动视暴雪同意支付5,400万美元,解决加利福尼亚工作场所歧视诉讼,涉及性别歧视、薪酬不平等和性骚扰文化。2.🤝协议要求公司实施措施确保公平薪酬和公正晋升,其中4,600万美元将用于补偿2015年至2020年间的特定员工,尤其是女性。3.🌐加利福尼亚文化权利部门将提取其指控,协议中明确指出“没有法院或独立调查证实在动视暴雪存在系统性或普遍的性骚扰”。0000工信部:今年我国生成式人工智能市场规模将突破10万亿
据央视新闻报道,据工业和信息化部赛迪研究院数据显示,今年,我国生成式人工智能市场规模有望突破10万亿元。生成式人工智能正在加速渗透制造业、零售业、电信行业和医疗健康等四大行业。图源备注:图片由AI生成,图片授权服务商Midjourney0000这么多AI大模型,就没一个能算清今年这破调休的?
虽然我人还在泰国跟红衣大叔周鸿祎在靶场开心的射击。但是也知道昨天(8月27日)的一条微博热搜爆了。这一大串看着“像代码”的文字,乍看莫名其妙,其实这说的是今年中秋节和国庆节的放假调休安排。。。嗯,特酿的今年的中秋和国庆放假安排,从9月9日开始,先是上6休3(中秋节),再是上3休2,接着上5休1,然后上2休7(国庆节),最后上5休1,接连5周调休。站长网2024-08-28 23:34:510001消失的共享汽车:车场变坟场,千亿泡沫破裂,汽车沦为公共厕所
当共享成为流行,开发共享模式的人们只有两个下场一是大捞特捞,二是血本无归。似乎带上了共享二字,就没有任何缓冲地带要么疯狂加足油,狂飙突进譬如在城市里占有重要地位的共享单车、共享充电宝。要么一路下坠,江河日下一发不可收拾而这一类的代表就是今天要说的重点——共享汽车。不知道各位的城市里有没有共享汽车呢?大概率有,甚至还用过一两次但是现在,它们就像幽灵一样消失在我们的生活。站长网2023-05-23 22:31:390000