情景判断测验的理论问题与效度实证研究

基于以上文献研究成果，本文提出以下总体研究设计与构思：

（1）研究的主要目的和理论焦点

从以往的研究文献中，我们可以发现，在情景评价和情景判断测验领域还存在很多值得进一步研究的问题。以目前情景评价和情景判断测验研究领域需要解决的问题为出发点，本研究希望通过情景判断测验过程研究与模型比较检验相结合的方式，对组织人员选拔和评价实践中情景判断测验的理论问题进行比较系统的研究。在以往有关情景判断测验研究中，还没有对情景判断测验的过程，特别是被试在情景判断测验过程中是如何解决情景问题的这一方面进行探讨，本研究以Simon，Newell等个体问题解决策略研究为基础（Newell，Simon，1972；Simon，1979），对情景判断测验过程中的问题解决策略及其对测验得分的影响进行一些初步的探索，希望能够把握目前的研究趋势，关注情景判断测验过程。

此外，本研究还将通过实证研究方式，对情景判断测验的效度进行系统研究，包括情景判断测验的构思效度、效标关联效度和交叉效度检验。在比较研究的基础上，提出影响情景判断测验效度的因素。通过运用问题解决研究思路，对情景判断测验中的效度、被试反应过程和问题解决策略等方面进行探讨，希望能够为情景判断测验以及情景评价研究和实践提供一定的理论支持。

（2）研究的总体构思和设计

情景判断测验作为重要的人事选拔和评价技术，如果在研究上缺乏理论基础的支持，则会对理论研究贡献和自身发展产生较大的限制。在总结以往研究不足的基础上，结合近几年在情景判断测验领域的研究进展，本研究提出了三个方面的理论思路作为研究支持。

第一，构思导向的情景评价测验开发和效度检验思路。在本研究思路上，关注情景判断测验的构思和理性开发模式的检验。文献综述的研究进展总结部分，我们已经指出在情景判断测验研究领域开始从方法研究向更多关注测量构思倾斜。从人事选拔与评价研究思路变迁来看，研究者也更加关注测验所测量的构思。在这种思路的影响下，McDaniel，Ployhart，Ryan提出了构思导向情景判断测验研究思路，这为进一步研究情景判断测验提供了有力的方法论支持。本研究认为构思导向的测验效度研究思路对情景判断测验的开发和研究具有重要的指导意义。本研究将通过情景判断测验的构思检验与测验开发模式的比较，对情景判断测验构思导向思路进行检验。

第二，采用权变观点构建管理胜任特征与工作绩效之间的适应性模型。从目前的研究结果看，虽然越来越多的研究者倾向于认为情景判断测验测量是多维构思（Chan，Schmitt，1997；McDaniel，Nguyen，2001；Ployhart，Ryan，2000），在情景判断测验的开发和研究上，也更多的倾向于构思导向的思路。但是，很少有研究对情景判断测验的测量构思内涵进行探讨和检验。本研究从管理胜任特征构思出发，对情景判断测验所测量的管理胜任特征与工作绩效之间的适应性关系进行检验。本研究认为管理胜任特征维度与绩效之间的关系并不是线性的，更多的体现了一种适应性关系，胜任特征维度与工作绩效侧面间存在不同的影响关系。

第三，测验效度研究和过程研究相结合的模式，以Newell，Simon，et al（1972）关于人类问题解决研究为理论支持，对情景判断测验的内部过程进行探讨。

以往情景判断测验中对个体评价和判断过程的忽视，使得我们对情景判断测验效度来源的认识停留在表面层次，本研究希望以Newell，Simon等有关个体问题解决策略研究为基础（Newell，Simon，1972；Simon，1990；Kahneman，Tversky，1984）对情景判断测验的过程进行深入研究。Simon等认为人类问题的解决始于对问题的表征和知觉，个体对问题的表征和知觉受到已有领域知识和工作经历的影响。在以往研究的基础上，本研究提出了管理者在情景判断测验中的三个影响因素或评价依据，分别为工作经验、相关管理知识和个性价值倾向（Weekly，Jones，1999；McDaniel，et al，2001；Weekly，Ployhart，2001）。

在人类问题解决研究中，Newell，Simon等指出个体问题解决方法和策略主要可以分为两大类：算法和启发式方法。同时，提出了个体问题解决信息加工过程中的几条原则，认为个体所面临的任务环境结构决定着问题空间的结构，而问题空间的结构又决定着个体在问题解决中可能采取的方法和策略（Newell，Simon，1972）。本研究区分了两类情景判断测验：行为式判断测验和情景式判断测验，并根据各自的特点，提出了相应的问题解决方法假设。人类问题解决研究思路，将为理解情景判断测验内部过程提供很好的理论支持。运用问题解决理论思路，本研究提出了情景判断测验中管理者解决情景问题的三种主要策略：启发式搜索策略、行为激活策略和假设检验策略。管理者问题解决策略与情景判断测验及其工作绩效的关系是本研究的理论焦点之一。

根据上述的研究目的和理论焦点，本研究提出总体的构思框架如图5-1所示，本研究将从三个方面进行研究。

图5-1　本研究的总体构思框架(www.xing528.com)

通过情景判断测验构思效度检验研究和管理胜任特征与工作绩效维度间的关系研究，探讨情景判断测验的效度来源。同时，根据胜任能力研究思路，对胜任特征与绩效间关系相对于个体类型变量和职位特征变量的权变关系进行考察。

通过测验开发模式对情景判断测验效度影响研究和交叉效度比较检验，对实证开发模式与同质量表模式进行比较，为验证构思导向的情景判断测验思路提供实证支持。

根据目前人事选拔与评价领域的最新研究思路，关注管理者在情景判断测验过程中的问题解决策略。通过对情景式判断测验与行为式判断测验的比较，了解两种类型测验的效标关联效度来源，并对管理者在两种类型测验中的问题解决策略及其效应进行探讨。

（3）研究设计

围绕研究的总体构思框架，本研究主要分为以下几个方面：

研究一通过文献研究与半结构化访谈相结合的方法，对目前国内外有关情景判断测验研究和应用的现状进行分析，提出国内情景评价研究和应用中存在的问题；通过访谈和文献研究，对中国文化背景下管理者的胜任特征进行探讨。

研究二主要通过多方法多特征研究设计，应用结构方程技术，对情景判断测验的构思效度进行实证检验。通过对单一构思模型、多维层次模型的比较，对目前有关情景判断测验构思效度方面的争论进行比较，对情景判断测验测量构思的多维层次性进行检验；通过对单纯方法模型、单质多法模型以及多质多法模型的比较，进一步了解情景判断测验的构思特征，并对情景判断测验中的特征效应和方法效应进行估计。

研究三从探讨情景判断测验所测量的管理胜任特征与工作绩效关系角度出发，对个体特征以及职位特征对管理胜任特征要求进行比较分析，提出影响情景判断测验与工作绩效关系间的权变因素；最后，初步探索管理胜任特征与工作绩效维度间的关系模型。此外，通过分组回归分析，对情景判断测验随工作经验的预测效应模式进行了检验。

研究四采用交叉效度检验实验设计模式，主要探讨情景判断测验的同质量表开发模式和实证开发模式，通过在交叉效度检验样本中的实证检验，对不同模式以及不同计分方式对情景判断测验效度的影响进行比较分析。同时，对两种不同开发模式下效度缩水等问题进行具体的探讨，为构思导向的情景判断测验开发思路提供实证支持。

研究五以Newell，Simon，et al（1972）人类问题解决研究为指导，注重情景判断测验的评价过程，主要比较不同情景判断测验模式下，被试解决情景问题时的策略差异。在研究设计上采用不等同对照组设计思路，通过情景判断测验平行测验开发策略，在有效控制其他无关因素影响的情况下，对情景式判断测验与行为式情景判断测验这两种情景评价进行比较。分析被试对两种测验效度及公平性知觉的差异，初步探讨被试在两种测验下的问题解决策略及其对测验得分影响，探究情景式判断测验与行为式判断测验的效度来源。

最后，在本研究的基础上，对研究结论进行总结和综合讨论，提出研究的理论和实践意义，并进一步指出情景评价测验领域未来研究方向。