Percy Liang 提出 priced guidance 评估 Astra 能否预测新论文

Percy Liang 讨论如何估算 Astra 生成截止日期之后某篇新论文的概率，直接朴素采样会因尾概率过小而不可行。priced guidance 的核心做法是让模型 Astra 与一个已读论文的 guide LLM 对话，通过精确统计 guide 传给模型的比特数来给出概率下界。这种思路也可以作为面向前沿模型的新评估方式。