首页 > 快讯 > 上海人工智能实验室葛佳烨:大模型评测亟需可靠的数据污染检测技术

上海人工智能实验室葛佳烨:大模型评测亟需可靠的数据污染检测技术

新火种    2024-04-15

14日讯,在“知乎AI先行者沙龙”上,上海人工智能实验室司南大模型评测产品负责人葛佳烨表示,大语言模型评测中面临全面性、评测成本、数据污染、鲁棒性等挑战。她表示,评测数十万道题需要大量算力资源,基于人工打分的主观评测成本高昂。同时,海量语料不可避免带来评测集污染,亟需可靠的数据污染检测技术。此外,大模型对提示词十分敏感,多次采样情况下模型性能不稳定。(记者 黄心怡)

相关推荐
免责声明
本文所包含的观点仅代表作者个人看法,不代表新火种的观点。在新火种上获取的所有信息均不应被视为投资建议。新火种对本文可能提及或链接的任何项目不表示认可。 交易和投资涉及高风险,读者在采取与本文内容相关的任何行动之前,请务必进行充分的尽职调查。最终的决策应该基于您自己的独立判断。新火种不对因依赖本文观点而产生的任何金钱损失负任何责任。