ChatGPT能预测未来特定事件,准确率高达97%

AI最新资讯4周前发布 tree
18 0 0

今日应用


今日话题


ChatGPT能预测未来特定事件,准确率高达97%
ChatGPT能预测未来特定事件,准确率高达97%
 

重点标签 大语言模型预测能力未来叙述ChatGPT宏观经济预测

文章摘要


步骤2:撰写摘要
贝勒大学经济学院的两位教授,Pham Hoang Van和Scott Cunningham,对OpenAI的GPT-3.5和GPT-4进行了深入研究,以探讨大语言模型(LLM)在预测事情方面的能力。他们的研究使用了两种提示方法:直接预测未来叙述,并通过100次实验对ChatGPT模型进行了多维度评测。

在直接预测中,ChatGPT的表现并不理想,例如在预测2022年奥斯卡最佳男主角时,准确率仅为25%左右。然而,当采用未来叙述提示方法时,ChatGPT的准确率显著提高至97%,成功预测出Will Smith获得最佳男主角。这种提问方式能够激发ChatGPT的创造、联想和数据分析能力,同时规避了OpenAI的安全管理设定。

研究人员还发现,通过未来叙述提问,ChatGPT能够更好地利用其训练数据中的信息。例如,在医学问题上,ChatGPT能够提供有帮助的答案,而不是直接建议用户去看医生。

在未来叙述提示中,ChatGPT被要求模拟美国联邦储备委员会主席Jerome Powell在未来的某个时间点发表演讲,提供宏观经济数据,并讨论未来的货币政策和经济展望。结果显示,ChatGPT-4在使用未来叙事提示时,在预测通货膨胀率方面表现出了一定的准确性,尤其是在模拟Powell的角色时,这些预测与密歇根大学消费者预期调查的数据相当接近。

在失业率预测方面,ChatGPT-4在模拟Powell的角色时,预测结果与实际数据的吻合程度很高。然而,尽管ChatGPT在某些特定任务上的预测能力可以媲美人类专家,但在处理复杂的宏观经济预测时,短期内仍然无法替代人类的预测。

研究人员指出,ChatGPT模型的预测能力受限于其训练数据的截止日期和范围,以及在生成预测时可能受到伦理和法律的限制。尽管如此,ChatGPT在处理大量数据和模式识别方面表现出色,但在需要深入理解复杂经济机制和进行精细调整的情况下,仍然无法比肩人类专家的直觉、经验和对实时数据的敏感性。

文章来源


原文地址: 点我阅读全文
原文作者: AIGC开放社区

© 版权声明

相关文章

暂无评论

暂无评论...