跳到主要内容
检索

Liqin Ye

1 篇关联报道

订阅更新
  1. arXiv

    Forecast-Dojo 用 1568 个 Polymarket 事件与 1880 万篇带日期新闻构建可重放预测环境,12 个模型加研究工具后 Brier 分数全部下降但仍不及市场预测

    作者提出 Forecast-Dojo,一个把已结算的预测市场问题与带日期新闻结合的可重放环境,让 LLM 预测智能体在连续历史日期上研究事件并反复修正预测;该环境包含 1568 个 Polymarket 事件(按时间划分为训练期与评估期)和 1880 万篇带日期新闻文章,在 12 个模型的评估中研究工具使全部 12 个模型的 Brier 分数下降,预测随事件展开而改善且新增带日期证据更多的步骤增益最大,但每个模型在 Brier 分数和准确率上仍落后于历史市场预测,跨日期携带的信念笔记本降低了研究成本却未稳定提升预测质量,此外该环境还提供交互轨迹与结果反馈用于智能体学习,并以监督微调作为概念验证。

已读完全部报道