2015年5月28日 09:10来自：lurkarot

我的水平不高，很少参与答案评审。但是答案评审好像是站长很关心的一个问题，因此也就冒昧地谈谈自己的想法。但愿对站长有帮助。

首先是站长不必确保题目答案是100%地准确。总体来说，（我做过的）101的题目答案质量是很不错的。考虑到101有这么庞大的题库，这更是不容易。偶尔会有人抱怨一下错误答案，但我觉得站长不必太留意。站长对积压的待审答案的忧虑实际上也就是对题目不完美性的一种忧虑。对于这些问题，站长唯一要保证的就是告诉用户101是一个共建网站，答案不是完美的，并且鼓励和感谢用户参与修正答案。站长当然明白这些道理，但我觉得这些信息应当更加明确地传递给用户。比如每次在告诉用户做对还做错的时候，用一小行字告诉用户系统的答案不一定是完美的。这种提示在题目有待审答案，或者题目打分很低，或者题目是新录入的时候尤其有必要。这些提示对于铁杆用户没多大必要，但对帮助新用户建立起对101良好的第一印象是很重要的。

其次是更大程度地利用普通用户来评审答案。实现方法是让系统主动邀请棋友来评审答案。在实施这个方案时有几点应当考虑。
一是要明确地邀请棋友参加答案的提交和评审。我不知道其他棋友是怎么想的，但作为一个低级别的棋友，我不大愿意提交或者评审答案。一是怕献丑，二是担心我的错误评论会学浪费高手们的时间。当然，如果系统告诉我，评论错了没关系，系统会自动滤掉我的错误答案，那我会更愿意参加这个活动。系统同时也可以告诉棋友，提交和评审答案也是在思考，也是一种锻炼。棋友做题做厌了可以来评评答案。站长可以把“审题”发展成为像“做题”一样的练棋活动。
二是系统应当自动提取最适合于或者最需要当前用户评审的题目。这样做的好处是可以有效地利用棋友们的人力资源。简单的题就让低级别的棋友们看看，到了需要高手下定论的时候再呈给他们看。
三是一个用户受邀请的概率以及评审权重要和评审正确率挂钩。新棋友不会收到邀请。恶搞的用户最终不会受邀请，或者是系统并不会记录他的评审。
四是尚在评审中的答案可以用来评判作业答题的对错。当然待审答案应当经过一定数量的用户的评价。当利用这些答案时，系统在显示用户是不是做对之前，可以告诉用户，这是一条待审答案，用户愿不愿意用它在判断对错。如果不愿意的话，那题目就不计入总分。同时询问棋友，看他认为答案有没有问题。
五是站长可以考虑在生成作业时优先考虑有待审答案的题目。在棋友做题过程中，优先考虑待审答案。当然，作业中有过多的待审答案也许会引起用户反感或者对题目质量的怀疑。因此站长可以在作业模板设置页面上加一条关于这些方面的选项。101一天的做题量有两万左右。即使只有5%的答案是待审答案，只有一半的棋友能对答案给反馈，那用不了多久系统就能积累大量同级棋友对待审答案的反馈。同级棋友的判断准确率不高，但至少是能排除明显不对劲的答案。
六是如果同级别（或者稍高级别）网友压倒性地认为待审答案有问题的话，系统应当通知答案提交者重新审视答案。答案提交者可以修改或者删除答案，用不着提交给更高级别的网友去判断明显有争议的答案。如果真理是掌握在少数人手中，那可以发贴邀请高手来评判。如果低级棋友知道有这个机制的话，那他们也许会更踊跃地参加题目的评审。另外，如果答案提交者在一定时间内不回应的话，那答案就自动被删除了。这样有助于塑造101敏捷有活力的形象。
七是系统应当鼓励网友提交的答案至少有两手（算上电脑的应手就是三手）。答案有两步，那就能用它生成衍生题了。站长说过目前不考虑衍生题这事，但我觉得可以留个可能性。衍生题的作用不仅仅是在于扩充题库，而且可以帮助棋友理解难题。我相信有很多网友看着难题的答案的时候仍然是云里雾里。系统可以考虑让棋友做这些难题的衍生题。衍生题做顺手了，再做原题从云里雾里到一目了然了，这一下子就感觉到进步了。这完全可以成为一个很好的增值服务项目。