工程师利用GPT-4,实现对 AI 可穿戴设备进行编程
站长网2023-05-19 16:23:051阅
Project Ring 是一款腕戴式小型计算机,它使用 AI 实时分析环境,并进行文本描述,再通过 ChatGPT 对环境进行评估。
这款可穿戴设备结合了语言和图像模型,以提供人与 AI 之间更流畅的交互体验。
根据开发人员 Mina Fahmi 的说法,该项目旨在“展示低摩擦交互,将人类与人工智能之间的物理和数字信息融合在一起。”
为此,Fahmi 构建了一个带摄像头和操纵杆的腕戴式小型计算机,可以使用Replicate image-to-text 模型对环境进行实时可视化分析,用文本进行描述,并通过ChatGPT对其进行评论。

整个过程中,使用 Eleven Labs 的文本转语音服务将文本转换为语音,然后通过 安卓智能手机传输到骨传导耳机。耳机有一个内置麦克风,允许用户对可穿戴设备说话,例如,询问有关环境的问题。使用OpenAI 的 Whisper将用户的语音转换为文本,以便 ChatGPT 参与智能评论。所有数据都在谷歌云中处理。

Fahmi 称他使用GPT-4完成了 Project Ring 的所有代码生成。语言模型总共生成了大约750行代码。其中包括用于 Raspberry Pi 的 Python 脚本、云应用程序、网站和 Android 应用程序。
需要注意的是,Fahmi 有编码背景,但他已经很多年没有写过任何代码了。他相信项目表明使用 GPT-4来编写完整的软件原型是可能的,虽然不是一件容易的事情。
该项目还强调了人工智能通过提供对环境的实时描述和评论来改善有视觉或听觉障碍的人的无障碍环境的潜力。
项目展示了人工智能自动化编码任务和创建完整软件原型的潜力。它还强调了人工智能增强人机交互和提供体验世界的新方式的可能性。
0001
评论列表
共(0)条相关推荐
年收入超10亿美金?OpenAI 的“赚钱戏法”
“我当时见到他不到三分钟,就在想,啊,19岁的比尔·盖茨估计也就这样了吧!”在YC创始人PaulGraham(格雷厄姆)的眼里,28岁的SamAltman与19岁的比尔·盖茨一样,名校肄业、特立独行、坚信世界可以被改变,利他主义与极致野心相交织,但Altman更为激进,野心甚至超过了硅谷能容纳的边界。站长网2023-08-31 16:16:590000《财富》发布全球人工智能创新者50强榜单 百度入选
昨日,《财富》发布了首届全球“《财富》人工智能创新者50强榜单”,百度成为唯一入选该榜单的中国企业。站长网2023-11-22 16:49:440000高考作文人工智能上热搜:AI时代 人们的问题是否会越来越少?
站长之家(ChinaZ.com)6月7日消息:随着2024年高考语文科目的落幕,考生们的心头重担暂时放下,而网络上对于今年高考作文题目的热议却如潮水般汹涌。今年,高考作文题目依旧牵动着亿万网友的心,各地试题纷纷亮相,其中,新课标I卷的作文题尤为引人注目,它首次将人工智能作为核心议题。题目如下:阅读下面的材料,根据要求写作。(60分)站长网2024-06-08 05:41:260000Meta 解散蛋白质结构数据库团队 战略重点聚焦商业人工智能
据FT消息,前身为Facebook的社交媒体巨头Meta解散了一个科学家团队,该团队利用人工智能创建了包含超过6亿个蛋白质结构的数据库。站长网2023-08-08 09:10:010000OpenAI或用3D引擎/虚幻引擎训练视频模型Sora
OpenAI最近发布了多段由Sora生成的视频,展示了令人惊叹的3D效果。这些视频内容丰富,包括潜水探索沉船、描述日本江户时代宁静场景的立体模型等。除此之外,Sora还展示了一些新功能,比如无缝衔接。这意味着在两个输入视频之间可以逐渐进行插值,呈现出更加流畅的过渡效果。一些网友开始讨论Sora生成视频的背后训练数据来源,主流观点认为Sora可能使用了3D引擎或虚幻引擎进行训练。0000