多模态LLM幻觉问题降低30%!业内首个“啄木鸟”免重训方法诞生|中科大
还在用指令微调解决多模态大模型的“幻觉”问题吗?比如下图中模型将橙色柯基错认为“红狗”,还指出周围还有几条。现在,中科大的一项研究想到了一个全新办法:一个免重训、即插即用的通用架构,直接从模型给出的错误文本下手,“倒推”出可能出现“幻觉”之处,然后与图片确定事实,最终直接完成修正。他们将这个方法命名
还在用指令微调解决多模态大模型的“幻觉”问题吗?比如下图中模型将橙色柯基错认为“红狗”,还指出周围还有几条。现在,中科大的一项研究想到了一个全新办法:一个免重训、即插即用的通用架构,直接从模型给出的错误文本下手,“倒推”出可能出现“幻觉”之处,然后与图片确定事实,最终直接完成修正。他们将这个方法命名
12月19日下午,南方都市报、南都数字经济治理研究中心联合中国政法大学数据法治研究院在北京举办“第七届啄木鸟数据治理论坛”,多位来自高校、企业界的大咖嘉宾围绕“数据为本,AI向善”的主题,分享最新思考。