登陆注册

模型变傻

  • 谨防大模型基准评估陷阱!测试集乱入预训练,模型变傻

    最新研究警告,大型模型在基准评估中可能面临潜在危害,原因是测试集中的数据可能意外进入预训练过程。这项研究由中国人民大学信息学院、高瓴人工智能学院和伊利诺伊大学厄巴纳-香槟分校的学者联合进行。研究发现,由于预训练语料包含大量公开文本,而评估基准建立在这些信息之上,大型模型在实际应用中可能产生潜在的危害。论文地址:https://arxiv.org/pdf/2311.01964.pdf
    站长网2023-11-09 11:26:56
    0000