本研究探讨了 ACT WorkKeys Talent 评估与 ACT WorkKeys Essential Skills 评估之间的概念对应关系,以确定 Talent 的有效性证据是否可应用于后者。研究由 11 位主题专家对 12 个 Talent 特征与 6 个 WorkKeys Essential Skills 构建的 72 个配对进行评估,使用 0-3 分重叠量表进行评分,并二值化处理(0/1 为不匹配,2/3 为匹配)。结果显示:
-
核心观点:WorkKeys Essential Skills 中的 Work Ethic、Collaboration、Resilience、Leadership 和 Creativity 与其理论对应的 Talent 构建存在强匹配,表明构念高度收敛,支持有效性证据的转移。Integrity 和 Savvy 未达到强匹配,分别与 Talent 构建的平均匹配分数低于 1.5 和 1.6。
-
关键数据:
- 11 位专家的平均匹配分数显示 6 个配对(Collaboration-Creativity, Leadership-Influence, Resilience-Stability 等)达到高度匹配(M≥2.8)。
- 二值化分析中,11 个配对(如 Collaboration-Creativity, Leadership-Influence 等)超过 80% 匹配率,仅 Integrity 和 Savvy 未达此标准。
- 评分者间一致性分析:平均测量 ICC 为 0.946(优秀),多数 WKES 构建内部一致性高(如 Work Ethic ICC=0.979),但 Integrity 和 Savvy 的 Fleiss's κ 较低(κ=0.138 和 κ=0.498)。
-
研究结论:
- WKES 框架与 Talent 框架存在显著对齐,除 Integrity 和 Savvy 外,其余 WKES 构建均有明确对应的 Talent 构建支持其有效性研究。
- 意外发现:Work Ethic 与 Striving 强匹配(均涉及目标坚持和高标准),Leadership 与 Optimism 强匹配(均包含积极预期)。
- 建议:可进一步研究 Integrity 和 Savvy 的对齐问题,并探索其他技能评估框架的整合。