ChatGPT模型中的1750亿参数

我们经常会看到在介绍大语言、扩散等模型时，会在后面或前缀加上100亿、500亿、2000亿等各种参数，你可能会纳闷这到底是个啥呀，是体积大小、内存上限、还是使用权限?在ChatGPT发布一周年的日子，「AIGC开放社区」用通俗易懂的方式为大家介绍一下这个参数的含义。由于OpenAI没有公布GPT-4的详细参数，我们就用GPT-3的1750亿来说说。