普渡大学发布Talk2Drive框架 为自动驾驶汽车提供智能指令解析能力
要点:
1. 普渡大学发布Talk2Drive框架,利用大型语言模型实现自动驾驶汽车的智能指令解析。
2. Talk2Drive框架通过接收命令、处理、生成可执行代码,结合实时环境数据,降低人类接管率。
3. 框架具有个性化服务,能理解不同驾驶员的指令,降低接管率,提供定制化驾驶体验。
普渡大学最新发布了Talk2Drive框架,利用大型语言模型为自动驾驶汽车提供智能指令解析能力。这一框架的核心在于通过接收命令、处理与推理,生成可执行代码,结合云端实时环境数据来实现人车交互的全新方式。
在处理命令时,框架考虑了关键的上下文信息,确保生成的驾驶策略安全且适应当前环境条件,从而降低人类接管率。

项目地址:https://purduedigitaltwin.github.io/llm4ad/
Talk2Drive框架通过先进的语音识别技术将人类口头命令转换为文本指令,确保人类意图准确被理解。结合云端的实时环境数据,框架能够考虑天气、交通状况等关键信息,在处理命令时作出相应调整,保证驾驶策略的安全性。
通过推理生成代码,框架不仅包含简单驾驶指令,还涉及复杂驾驶行为和低级控制器参数的调整,基于对道路状况和驾驶员需求的深入理解。
在个性化服务方面,Talk2Drive框架能够精确理解乘客的语言指令,满足其需求,并记录人车交互以优化系统,学习乘客偏好提供定制化驾驶体验。
实验结果显示,框架能够降低不同驾驶员的接管率,在不同场景下表现出色。这一突破性研究不仅展示了大语言模型在自动驾驶领域的潜力,也为未来自动驾驶技术发展开辟新道路,引领人机交互领域的进步。
普渡大学数字孪生实验室致力于在大语言模型与自动驾驶领域的创新和探索,欢迎全球研究者、工程师及行业同仁访问项目网站,共同推进自动驾驶技术发展,探索未来交通可能性。
Talk2Drive框架的推出将为自动驾驶汽车提供更加安全、舒适和个性化的驾驶体验,预示着以人为本、智能化的未来交通时代的到来。
阿里云大模型「通义千问」开始邀请测试
阿里云公众号今天中午发文宣布,开始邀请测试大模型「通义千问」。目前该模型主要邀请企业用户进行体验测试,用户可以通过官方网站(tongyi.aliyun.com)申请参与体验。符合条件的用户将有机会试用该模型。点击进入通义通义千问官网,可以看到下方有「申请体验」和「使用邀请码」两个按钮,用户可使用邀请码登录或通过阿里云APP/支付宝/钉钉账号注册提交体验申请。站长网2023-04-12 11:58:100000文生图新SOTA!Pika北大斯坦福联合推出RPG,多模态助力解决文生图两大难题
【新智元导读】近日,北大、斯坦福、以及PikaLabs发布了新的开源文生图框架,利用多模态LLM的能力成功解决文生图两大难题,表现超越SDXL和DALL·E3近日,北大、斯坦福、以及爆火的PikaLabs联合发表了一项研究,将大模型文生图的能力提升到了新的高度。论文地址:https://arxiv.org/pdf/2401.11708.pdf站长网2024-02-18 09:16:370000微软确认 Bing 聊天实验性第三方浏览器支持正在推出
微软上周确认,Bing聊天将开始尝试为第三方浏览器提供支持。几个月前,Bing聊天作为一项聊天机器人AI服务推出时,只能在Edge浏览器上使用。但最近在Bing的Reddit页面上出现的帖子显示,Bing聊天已经在苹果的Safari和谷歌的Chrome浏览器中正常运行。站长网2023-06-05 21:07:030000微信刷掌支付发布 支持交通卡、校园卡、门禁卡等绑定
微信宣布,旗下刷掌支付正式上线,由腾讯优图实验室提供自研技术支持。刷掌支付能和交通卡、会员卡、校园卡、门禁卡、门票电子码绑定,刷掌验证身份就能进行支付、入门、签到。据介绍,微信刷掌采用刷掌识别技术,运用了兼容多设备的手掌识别模型,利用掌纹和掌静脉等重要信息,不受光线明暗、伸掌姿势等因素影响。站长网2023-05-22 08:31:410000科学家表示:利用AI扫描可能提早检测出柏金森病
本文概要:1.一项研究发现,使用AI分析眼部OCT扫描数据,可以检测出柏金森病患者与非患者眼部细胞层厚度的差异。这可能能在出现症状前7年检测出疾病。2.研究人员相信眼部扫描可以提早检测疾病,并希望将来可以常规进行。OCT扫描非侵入性,已广泛用于眼科,可显示细胞层信息。3.研究发表在《神经学》杂志上。由于OCT扫描非侵入性,可望在NHS中推广应用。站长网2023-08-23 16:26:540000