多模态大模型NExT

要点:1、NExT-GPT支持任意模态的输入和输出，实现了从任一模态到任一模态的转换。2、NExT-GPT通过组合开源的编码器、语言模型和解码器实现了全能的多模态能力。3、NExT-GPT实现了端到端的训练和指令微调，具有较好的多模态表示对齐能力。