人工智能根据大脑活动记录解码再现 Pink Floyd 歌曲片段
站长之家(ChinaZ.com) 8月16日消息:科学家们通过窃听人脑的脑电波重建了平克·弗洛伊德 (Pink Floyd) 的歌曲《Another Brick in the Wall》——这是第一次从大脑电活动记录中解码出一首可识别的歌曲。

希望这样做最终可以帮助那些因中风或肌萎缩侧索硬化症而难以交流的患者恢复在自然语音中的音乐性。肌萎缩侧索硬化症是史蒂芬·霍金被诊断出患有的神经退行性疾病。
虽然同一实验室的成员之前曾成功地从脑电记录中解码出语音,甚至是默默地想象出单词,但「总的来说,所有这些重建尝试都有一种机器人的特点,」美国加州大学伯克利分校的神经学家 Robert Knight 说道,他与博士后研究员 Ludovic Bellier 一起进行了这项研究。
「音乐本质上是情感性和韵律性的——它有节奏、重音、语调和音调。它包含了比任何语言中的有限音素更大范围的东西,这可以为可植入的语音解码器增加另一个维度。」
虽然以前的研究已经从大脑的言语运动皮层中解码出电活动,这个区域控制着唇、颚、舌和喉的微小肌肉运动,形成了词汇,但本研究使用了大脑听觉区域的记录,这里处理声音的所有方面。
研究团队对 29 名患者的脑电记录进行了分析,当他们播放了 Pink Floyd 1979 年专辑《The Wall》中的一段约三分钟的歌曲时,志愿者的脑活动通过将电极直接放置在他们的脑表面上来检测,这些志愿者正在接受癫痫手术。
然后,人工智能被用来解码这些记录,然后编码出声音和单词的重现。尽管声音非常模糊,但短语「所有一切,只是另一堵墙」在重建的歌曲中可以被识别出来——节奏和旋律保持完好。
Knight 说:「听起来有点像他们在水下说话,但这是我们的首次尝试。」
他认为使用更高密度的电极可能会提高重建的质量:「电极的平均间隔约为 5 毫米,但我们有几位患者的间隔为 3 毫米,他们在重建方面表现最好,」Knight 说道。
「现在我们知道如何做到这一点,我认为如果我们的电极间隔像 1.5 毫米,声音质量会更好。」
随着大脑记录技术的改进,还可能实现无需手术进行这种记录,也许可以使用粘贴在头皮上的敏感电极。
今年,德州大学奥斯汀分校的 Alexander Huth 博士领导的研究团队宣布,他们成功将大脑活动转化为连续的文本流,使用的是无创的磁共振成像(MRI)扫描数据。该系统的准确性不足以解码确切的单词,但可以检测到句子的要点。
Knight 表示:「这是一个非常好的演示,证明了许多用于语音解码的相同技术也可以应用于音乐——在我们的领域中,音乐体验的重要性如何,这是一个被低估的领域。」
「虽然他们没有在受试者想象音乐时记录脑部反应,但这可能是脑机接口将来用于的事情之一:将想象中的音乐转化为真实的音乐。这是一个令人兴奋的时代。」
这项研究的成果发表在《PLoS Biology》上,还确定了大脑中涉及节奏感知的新区域,并确认右脑比左脑更敏感于音乐。
对音乐和语言加工方式的更好理解也可能具有实际应用,例如帮助解释为什么患有布洛卡失语症的人,在唱歌时可以轻松地唱出词语,而不会遇到困难。
公安部明确严厉打击网络水军 关停违法违规账号2.1万余个
今日,公安部公布数据称,自今年4月开始,公安部开展了为期100天的网络谣言打击整治专项行动,全国公安机关共侦办案件2300余起,整治互联网平台企业近8000家(次),依法关停违法违规账号2.1万余个,清理网络谣言信息70.5万余条。公安部表示,当前“网络水军”造谣传谣违法行为,主要表现在以下三个方面:站长网2023-07-21 15:17:300000Stable Diffusion 3技术报告流出,Sora构架再立大功!生图圈开源暴打Midjourney和DALL·E 3?
【新智元导读】StabilityAI放出了号称能暴打闭源模型的StableDiffusion3的技术报告,采用DiT构架的新模型在灵活性和性能上都达到了新的高度。StabilityAI在发布了StableDiffusion3之后,今天公布了详细的技术报告。论文深入分析了StableDiffusion3的核心技术——改进版的Diffusion模型和一个基于DiT的文生图全新架构!站长网2024-03-06 17:14:01000251岁的退休阿姨,在四线城市逐梦互联网
“他打了一个急方向,车就窜上树了。我在天上飞的时候,心里说完了完了,要去死了,不能死啊我还有好多事没做,闭着眼念了十声阿弥陀佛,车落在地上,我眼睛一睁,嘿,还活着。”大雨中的高速路旁,雪姨站在被撞烂的轿车前——这是她曾经努力销售的回报之一,后备箱里的保险单、宣传单在雨里飞,送客户的油洒了一地。眼前饭桌上没人夹菜,全被她的话抓住了视线:“那一刻我突然不想干保险了,哪怕去要饭都不再干了!”站长网2023-07-12 18:01:150000咨询公司麦肯锡称约有一半员工正在使用生成式人工智能
全球咨询巨头麦肯锡公司(McKinseyandCompany)的一半员工都在使用对生成式人工智能(genAI)。但它并不是唯一一个看到genAI迅速普及的组织。事实上,麦肯锡的AI分支QuantumBlack发布了一份年度报告,发现“genAI的使用已经非常普遍”。站长网2023-08-01 14:29:430000百川VS智谱,谁是中国的OpenAI?
6月初,外媒曾发出了“谁是中国的OpenAI”的拷问,经历了大模型创业潮之后,大浪淘沙,最终留下的不过寥寥数人。清华大学几个十字路口外的赛尔大厦,是明星创业者王小川的百川智能,搜狐网络大厦是学院派出身的智谱AI。二者在经历了市场的检验后,成为了最有希望的两个候选人。两栋楼的争夺战,似乎已经悄然打响了。从融资上看,智谱AI和百川智能都在今年,完成了多轮大额融资。站长网2023-10-24 21:27:250000