1)工作岗位分析。在试题设计之前,应该深入分析工作岗位的特点,确定任职者应该具备哪些知识、经验和能力。工作岗位分析可以采用面谈法、现场观察法或问卷法。通过工作岗位分析,确定公文筐测试需要测评哪些要素,哪些要素可以得到充分测评,各个要素应占多大权重。
2)文件设计。包括选择哪些类型的文件,如信函、报表、备忘录、批示等;确定每种文件的内容;选定文件预设的情境等;需要特别注意文件与测评要素之间的关系。文件设计要准确把握测试材料的难度。材料难度过高,选拔的结果容易导致“大材小用”;如果过于简单,测试会出现“天花板效应”,被试都得高分,没有区分度。
3)确定评分标准。文件设计结束,接下来应该对文件处理的不同方法与手段进行不同的赋分。公文筐测试的评分标准设计是公文筐设计中的一个难点。该项工作最好放在测试结束以后进行。