CVPR’24｜中大哈佛等提出creative Leap-of-thought探究大模型幽默创新力

今日应用

闪萌

闪萌官网，GIF动图中文搜索引擎，发现好玩的gif动图,包括明星、美女、搞笑、微信QQ聊天表情包，可以一键分享到微信QQ新浪微博，支持gif动图下载，表情包下载到手机

今日话题

CVPR’24｜中大哈佛等提出creative Leap-of-thought探究大模型幽默创新力

 

重点标签 创造力、多模态、大模型、CLoT、幽默

文章摘要

“大喜利”是一种日本传统戏剧游戏，现代通常指Tonchi (頓智)游戏，要求玩家对多模态内容作出幽默、有创意的反应。研究团队以“大喜利”为平台，探索多模态大模型的创新能力，并创建了Oogiri-GO数据集。

Leap-of-Thought (LoT)是一种新的非顺序、创造性思维范式，与传统的链式思考（Chain-of-Thought，CoT）方法相比，LoT强调打破常规思维，激发创造力。CLoT训练方法包括关联性指令微调和探索性自我调整两个阶段，旨在提高多模态大模型的创新响应能力。

性能评估显示，CLoT能够显著提高多模态大模型的性能，超越了包括GPT4v在内的先进模型。用户调查也证实了CLoT帮助模型生成了更好的幽默内容。此外，CLoT在其他任务上也展现了良好的泛化能力。

文章最后介绍了中山大学人机物智能融合实验室 (HCP Lab)，该实验室近年来在多模态内容理解等领域取得了丰富学术成果。研究团队的CLoT工作已开源，鼓励大家使用和引用。

文章来源

原文地址: 点我阅读全文
原文作者: 极市平台