跳到主要内容
检索

# 循环精炼器

1 篇关联报道

订阅更新
  1. arXiv

    循环精炼器换掉每遍训练目标:多解数独从2.5%升到98.8%,还不用答案清单

    循环精炼器把同一小网络反复作用于草稿答案,但深度监督让每一遍都对准数据集存下的那一个答案;当题目有多个正确答案时,这个目标会把各答案混合成无效网格,并留下任何模型容量都消不掉的最低损失。改用“近端目标”——每一遍朝离自己输入最近的正确答案训练——后,同一个1.73M参数网络在2–64个答案的数独上解出98.8%,标准目标为2.5%;在答案超过一万个、不给答案清单的稀疏数独上解出93.8%,标准目标为0.0%。

已读完全部报道