CVPR’24|中大哈佛等提出creative Leap-of-thought探究大模型幽默创新力

AI最新资讯1个月前发布 tree
38 0 0

今日应用


今日话题


CVPR’24|中大哈佛等提出creative Leap-of-thought探究大模型幽默创新力
CVPR’24|中大哈佛等提出creative Leap-of-thought探究大模型幽默创新力
 

重点标签 创造力多模态大模型CLoT幽默

文章摘要


“大喜利”是一种日本传统戏剧游戏,现代通常指Tonchi (頓智)游戏,要求玩家对多模态内容作出幽默、有创意的反应。研究团队以“大喜利”为平台,探索多模态大模型的创新能力,并创建了Oogiri-GO数据集。

Leap-of-Thought (LoT)是一种新的非顺序、创造性思维范式,与传统的链式思考(Chain-of-Thought,CoT)方法相比,LoT强调打破常规思维,激发创造力CLoT训练方法包括关联性指令微调和探索性自我调整两个阶段,旨在提高多模态大模型的创新响应能力。

性能评估显示,CLoT能够显著提高多模态大模型的性能,超越了包括GPT4v在内的先进模型。用户调查也证实了CLoT帮助模型生成了更好的幽默内容。此外,CLoT在其他任务上也展现了良好的泛化能力。

文章最后介绍了中山大学人机物智能融合实验室 (HCP Lab),该实验室近年来在多模态内容理解等领域取得了丰富学术成果。研究团队的CLoT工作已开源,鼓励大家使用和引用。

文章来源


原文地址: 点我阅读全文
原文作者: 极市平台

© 版权声明

相关文章

暂无评论

暂无评论...