PyTorch团队推出轻量级runtime
站长网2023-10-19 18:08:130阅
要点:
PyTorch团队推出轻量级运行时,支持在边缘设备上运行
PyTorch Lite运行时具有轻量级、高效、低延迟等特点
PyTorch Lite还支持对TensorFlow、Caffe2等其他平台的模型进行转换
ExecuTorch: ExecuTorch 是 PyTorch Edge 团队推出的全新解决方案,旨在支持移动设备和边缘设备上的本地推断能力,得到了 Arm、Apple 和 Qualcomm Innovation Center 等行业领先公司的支持。
ExecuTorch的关键组成部分: ExecuTorch 提供了紧凑的运行时环境,具有轻量级操作员注册表,可以覆盖 PyTorch 模型生态系统,并为在边缘设备上执行 PyTorch 程序提供了简化的路径。
它还附带了软件开发工具包(SDK)和工具链,以便机器学习开发人员能够从模型创作到训练和设备委派的整个 PyTorch 工作流中进行操作。这些工具使机器学习开发人员能够在本地对模型进行分析和更好地调试原始 PyTorch 模型。
PyTorch Edge 旨在将研究和生产环境更紧密地联系在一起,使各种机器学习模型能够轻松部署到边缘设备。它提供了一个跨越各种边缘用例的框架堆栈,涵盖了视觉、语音、自然语言处理、翻译、排名、完整性和内容创建等多个领域。
PyTorch Edge 提供了核心组件的可移植性,这些组件适用于不同硬件配置、性能和效率的设备,通过自定义优化以及定义良好的入口点、表示和工具,提高了开发人员的生产力。
0000
评论列表
共(0)条相关推荐
大厂打响开工发令枪:有人领到3688元红包,有人接到停工通知
在度过8天的春节长假之后,打工人们背起行囊,收拾好心情,开启了农历新年的工作。中国人讲究好彩头,广东、深圳地区企业每年开工都有“逗利是”的习俗,“利是”也被称为“利市”,并且有“利利是是,吉祥如意”的寓意。现在,这种风俗已经风靡全国。00001688和闲鱼成为阿里重要业务吧 年轻用户涌向电商平台
据报道,阿里旗下的电商平台1688和闲鱼的重要性提升,最近被升级为淘天集团的一级业务。根据《晚点LatePost》的报道,二手业务在大环境的变化下得到了新的发展机会和空间,更注重性价比的消费者和更多的灵活就业者涌向了批发电商平台。越来越多的年轻用户开始使用1688和闲鱼,这可能是两个业务提升重要性的原因之一。站长网2023-11-02 14:15:460000华为Mate 70系列11月登场:首发原生鸿蒙
快科技10月25日消息,博主厂长是关同学透露,Mate70系列将于11月20号前后发布,同时亮相的还有MateX6折叠屏。他表示,Mate70系列相比上代Mate60系列提升巨大,建议购买Pro版本,绝对值得拥有。据悉,华为Mate70系列有两种设计,标准版是环形镜头,高配版是八边形镜头,都支持侧边指纹识别3D人脸识别。0000直播间里的AI主播,能否卷出一片新天地?
最近,直播带货行业刮起了一股AI主播的风。区别于以柳夜熙为代表的3D超写实数字人,A-soul等2D二次元数字人,直播间里的AI主播则属于2D超写实数字人,该技术以真人为基础,通过一段视频复制真人的语言、动作、表情,从而获得一个与真人相似度极高的AI主播。而在使用上也并不复杂,不需要真人时时看管,只需要一台电脑、一台桌子,即可实现24小时直播。站长网2023-05-10 14:07:590000Floneum开源:适用于 LLM 工作流程的图形编辑器!
floneum是一个面向本地AI和社区插件的图形化工作流编辑器。它提供了一个简单易用的图形界面,无需编程知识就可以组合和运行各种插件与本地AI模型。它针对的是对新闻提要摘要或情感分析等语言处理任务感兴趣的非开发人员。它没有系统依赖性,即使您没有编程背景,也可以轻松安装。它可以让您使用从网站和新闻源等不同来源获取的信息来创建更加结构化的提示链。站长网2023-09-14 21:38:090000