当前位置:首页 > 科技资讯 > 正文

Prophet Arena:AI预测未来的“先知”竞赛

AI能否像科幻电影中的先知一样预测未来?一个名为「Prophet Arena」的全新基准测试,正通过预测真实世界事件来评估AI的「预言」能力。

AI能否预测未来

在《黑客帝国》里,先知能够对Neo的未来做出预测。而ChatGPT等AI,则可以根据过去的语料来「预测下一个Token」。

那AI能否像先知一样,从全世界的杂乱信息里找出蛛丝马迹,准确地预测未来呢?

比如:

AI监管今年能否成为联邦法律?

美国职业足球大联盟比赛中,谁会获胜?

NBA今年的冠军会是谁?

Prophet Arena:AI预测未来的“先知”竞赛 AI预测 Arena 基准测试 未来预测 第1张

Prophet Arena:AI预测未来的“先知”竞赛 AI预测 Arena 基准测试 未来预测 第2张

昨晚的中国男篮亚洲杯冠军争夺战,中国男篮虽以1分之差惜败澳大利亚,但已是近十年来的最好成绩!

相信绝大部分人都不会猜到这个比分,那么,AI能否根据中国队此前的表现,提前预测到呢?

Prophet Arena:AI预测未来的“先知”竞赛 AI预测 Arena 基准测试 未来预测 第3张

更进一步的,AI能否像拉普拉斯妖一样,在获取了当下世界的所有信息后,精确预测未来的一切?

如果它能在某一瞬间知道宇宙中所有粒子的位置与速度,并且完全理解自然规律。

那么,就可以准确计算出过去的一切,并且精确预测未来的一切

今天要介绍的Prophet Arena就是一个通过实时更新的真实世界预测任务来评估AI系统预测智能的基准测试。

Prophet Arena:AI预测未来的“先知”竞赛 AI预测 Arena 基准测试 未来预测 第4张

把市场共识、自动化预测、信息整理和社区洞察结合起来,形成更强的整体预测能力

简单来说,Prophet Arena作为基准测试是独一无二的:

考的是预测能力:这是一种需要综合理解力、推理能力的高级智慧。

为「人机协作」而生:你可以给AI提供线索,看看它的预测如何变化;AI也会把它的思考过程告诉你。

不会过拟合,数据永不过时:因为未来的事件永远是全新的考题。

直面真实世界:AI的预测直接与真实的投注决策挂钩,表现好的模型真的能在虚拟市场里赚到钱。

Prophet Arena:AI预测未来的“先知”竞赛 AI预测 Arena 基准测试 未来预测 第5张

竞技场规则大公开

在Prophet Arena里,AI模型们要回答一个简单又根本的问题:

预测真实世界里还没发生的事,到底行不行?

预测指标设定

Prophet Arena:AI预测未来的“先知”竞赛 AI预测 Arena 基准测试 未来预测 第6张