认证开发周期

在设计与实施两个层面，我们都遵循严格流程来确定特定岗位应包含的能力以及我们如何进行测评。我们借鉴测量与心理测量学的最佳实践来设计与实施每项认证。此外，每个已上线的认证都在持续的质量保障流程下运行，以确保其始终保持我们所追求的高质量标准。

认证设计与开发

您或许好奇我们如何确定每项认证所测评的能力。基于初步的工作任务分析以及对领域专家的访谈，我们在认证顾问委员会的协助下制定详尽的认证规范。每份规范都包含关于认证的目的与受众、所测评的能力，以及认证的具体考试结构等详细信息。您知道吗？所有规范都是公开可见的。您可以在此查阅：

• 数据分析师（副级）
• 数据分析师（专业级）
• 数据科学家（副级）
• 数据科学家（专业级）
• 数据工程师（副级）

试题编写流程

针对每项认证，我们都会与来自行业的一线试题编写专家合作。通过这种方式，我们确保每道题目都能反映岗位所需的真实技能。我们有一套严格的试题审校流程（见下方图 1），题目将由其他试题编写者进行审阅（SME 审阅）、由我们的认证内容团队进行内部审阅（内部审阅），最终在题目准备投入考试前完成定稿。对于限时考试与实操考试，我们均提供详尽的出题指南，明确如何针对被测能力编写题目、应使用（或避免使用）何种语言等，以确保所有题目公平且不含偏见。

图 1. 两阶段试题审校流程。

考试计分

您是否想过限时考试与实操考试如何运作并如何计分？在技术手册中，我们解释了在限时考试中，我们如何依托项目反应理论与计算机自适应测试，快速且准确地估计您在各测评领域的技能水平。事实上，您在考试中获得的每一道题目都会根据您当前的表现量身定制，从而使我们能够高效判断您是否达到所申请认证的要求水平。随后，您的得分会与您需要超越的目标分进行比较以通过考试。该目标分通过对一位恰好达到我们期望候选人水平的假想考生进行数百次考试模拟而得出。基于合格候选人的预期得分分布，我们据此推导出用于限时考试的目标分。

质量监测

我们持续追踪所有限时考试的质量指标，包括通过率以及各题库的信度。通过这样做，我们能够持续为所认证的各能力领域提供可靠的评估。

虽然所有限时考试均为自动计分，但实操考试则采用自动计分（数据工程师副级）或人工评分。为确保评分的可靠性，我们采用双重评分流程，其中约 30% 的提交会由至少两位评分员评分，可能是两位外部评分员，或一位外部评分员与一位内部评分员。随后我们会比较两位评分员在量表上的评分情况；如出现分歧，将指派第三位内部评分员以消除分歧。该流程为评分员建立了持续的反馈闭环，确保其始终依据评分量表一致地进行评分，并将认证授予符合条件的候选人。

想了解技术手册中还能发现哪些内容？点此一探究竟！