登陆注册

2把大模型门槛打下来了

  • 几千元训完中文版LLaMA2!Colossal-LLaMA-2把大模型门槛打下来了

    要点:1、通过词表扩充、数据筛选和多阶段训练策略,在15小时内用几千元成本训练出中文版LLaMA2。2、中文版LLaMA2在多项中文任务上的表现明显提升,达到同规模模型的先进水平。3、构建流程、代码和权重均开源,可迁移应用到其他语言和领域,实现低成本大模型训练。
    站长网2023-09-25 14:07:48
    0000