开源小型语言模型MobiLlama 手机可运行训练
站长网2024-02-28 11:09:042阅
MobiLlama是一个开源的小型语言模型,专门针对移动设备运行训练的LLM,拥有5亿个参数。该模型的设计旨在满足资源设定计算的需求,同时注重在提高性能的同时降低资源消耗。

项目地址:https://top.aibase.com/tool/mobillama
MobiLlama是从一个更大的模型出发设计的,通过提出的训练设计的参数共享机制来降低预配置和部署的成本。这项工作的目标不仅是填补小型开源语言模型的空白,还要确保全面透明。这包括提供完整的训练数据流程、训练代码、模型权限重以及超过300个检查点。
想要体验MobiLlama,用户可以按照操作系统的指示下载预处理的Amber数据,并从源码安装。对于训练和微调,建议用户通过源码安装,以利用MobiLlama在20个A10080GB GPU节点上的性能。
这个0.5B大小的开源模型为移动设备提供了一个精确且完全透明的选择。如果用户需要一个小型语言模型来运行在资源中受在有限的环境中,MobiLlama 可能是一个非常有用的选择。
0002
评论列表
共(0)条相关推荐
5G网络为何面临“叫好不叫座”局面 邬贺铨:用户感知差 运营商回报低
快科技4月20日消息,中国工程院院士邬贺铨最近在演讲中指出,6G对于5G/5G-A而言不仅仅是技术的简单叠加,更是整体架构平台的彻底变革。他强调,5G网络所具备的大带宽eMBB、大连接mMTC、高可靠低时延uRLLC三大特性将在5G-A和6G中继续得到加强。同时,6G还将引入5G阶段所不具备的特性,比如通感融合、内生智能,以及支持沉浸式体验等。0001三大运营商SIM卡硬钱包上线数字人民币:手机断网、没电也能买买买
快科技7月11日消息,今日,中国移动联合中国工商银行,中国电信、中国联通联合中国银行推出的数字人民币SIM卡硬钱包,正式在数字人民币App上线。SIM卡硬钱包是将数字人民币App钱包关联至超级SIM卡,用户在商家进行付款时,无需扫码或者调出二维码,手机可在锁屏状态碰一碰商家POS机,即可轻松完成付款。目前只有具备NFC功能的安卓手机支持SIM卡硬钱包使用。站长网2023-07-12 11:35:340002一网红博主路上碰瓷21次获刑6年:专挑劳斯莱斯、埃尔法等豪车下手
快科技10月20日消息,据报道,一位网红博主3年来在路上碰瓷”21次,骗保3、40万元,被判刑6年。报道称,这位博主发布的视频显示,他平日骑行一辆杜卡迪在外滩风驰电池,在新买的滨江大平层俯瞰江景,外观光鲜,生活也极其惬意。但就是这样一位博主,在路上专门针对劳斯莱斯、保时捷、埃尔法等豪车故意碰瓷,进行诈骗或者骗保。检察院介绍,2021年,被告人小黄在道路上驾车时,与一辆丰田埃尔法发生剐蹭事故。0000苹果被评为美国最糟糕雇主:员工留存率最低 平均1.7年就跳槽
快科技7月29日消息,很多人在找工作时都想进入大厂”,羡慕大公司中的各项福利待遇,以及能够大战拳脚的机会。在科技领域,苹果等公司是绝对当之无愧的龙头,但其中的员工却似乎并没有想象中的幸福,也没那么牢固。最近简历平台Resume.io公布了一份最新的研究报告,苹果公司被评为美国最糟糕的雇主,亚马逊、Meta和特斯拉等大型科技公司也紧随其后。站长网2023-07-29 10:40:220000米哈游近况:蔡浩宇亲自研究AI,刘伟要求严控招聘
在《崩坏:星穹铁道》上线之后,不少人都认为米哈游有了新的营收支柱,即将进入稳健的「复制爆款」阶段。但最近葡萄君获悉,米哈游几位创始人近期的工作重点有了一些调整,他们对于组织发展也有了一些新的思考——这家公司仍然在寻找更正确的节奏,探索新的上限。01高层工作重点的调整首先,未来蔡浩宇将调动北美更多的资源,并投入更多精力亲自研究AI,而罗宇皓将常驻上海,继续负责更多项目开发工作。站长网2023-08-03 09:09:070000