今日应用
今日话题
ChatGPT能预测未来特定事件，准确率高达97%
重点标签 大语言模型、预测能力、未来叙述、ChatGPT、宏观经济预测
文章摘要
步骤2：撰写摘要
贝勒大学经济学院的两位教授，Pham Hoang Van和Scott Cunningham，对OpenAI的GPT-3.5和GPT-4进行了深入研究，以探讨大语言模型（LLM）在预测事情方面的能力。他们的研究使用了两种提示方法：直接预测和未来叙述，并通过100次实验对ChatGPT模型进行了多维度评测。
在直接预测中，ChatGPT的表现并不理想，例如在预测2022年奥斯卡最佳男主角时，准确率仅为25%左右。然而，当采用未来叙述提示方法时，ChatGPT的准确率显著提高至97%，成功预测出Will Smith获得最佳男主角。这种提问方式能够激发ChatGPT的创造、联想和数据分析能力，同时规避了OpenAI的安全管理设定。
研究人员还发现，通过未来叙述提问，ChatGPT能够更好地利用其训练数据中的信息。例如，在医学问题上，ChatGPT能够提供有帮助的答案，而不是直接建议用户去看医生。
在未来叙述提示中，ChatGPT被要求模拟美国联邦储备委员会主席Jerome Powell在未来的某个时间点发表演讲，提供宏观经济数据，并讨论未来的货币政策和经济展望。结果显示，ChatGPT-4在使用未来叙事提示时，在预测通货膨胀率方面表现出了一定的准确性，尤其是在模拟Powell的角色时，这些预测与密歇根大学消费者预期调查的数据相当接近。
在失业率预测方面，ChatGPT-4在模拟Powell的角色时，预测结果与实际数据的吻合程度很高。然而，尽管ChatGPT在某些特定任务上的预测能力可以媲美人类专家，但在处理复杂的宏观经济预测时，短期内仍然无法替代人类的预测。
研究人员指出，ChatGPT模型的预测能力受限于其训练数据的截止日期和范围，以及在生成预测时可能受到伦理和法律的限制。尽管如此，ChatGPT在处理大量数据和模式识别方面表现出色，但在需要深入理解复杂经济机制和进行精细调整的情况下，仍然无法比肩人类专家的直觉、经验和对实时数据的敏感性。
文章来源
原文地址: 点我阅读全文
原文作者: AIGC开放社区
相关文章
