科学测试的开发步骤
心理测量学,通常称为心理测试,是系统地使用测试来对心理物理特征、技能和问题进行排序,并预测心理表现。大多数作者将创建测试描述为精心制作一组对象,将其提供给具有代表性的样本群体,然后使用完善的统计方法分析响应。许多作者为潜在的测试开发人员提供了需要遵循的说明。
测试开发流程
研究人员首先必须定义他们想要调查的问题,因为这将作为问卷的基础。随着调查的推进,必须完全理解研究问题的各个方面。问题的措辞取决于研究人员寻求的信息类型、分析目标以及时间安排/问卷受访者。研究人员应该选择是使用开放式问题还是封闭式问题。它们应该简单明了,并且是确定制表策略的客观组成部分。
研究人员在考虑问题的排列顺序时,必须创建时间表的初步草稿。此时,可以展示之前类似问题的示例。默认情况下,研究人员应该重新阅读粗略的手稿,并在必要时进行调整以改进它。应彻底调查和纠正技术上的不一致之处。应进行试点研究以进行预测试,并根据需要对问卷进行修订。
问题应该易于理解,并且填写问卷的说明应该简单明了;这样做是为了最大程度地减少误解。构建工具的主要目标是收集可靠、可信和真实的数据,使研究人员能够准确地衡量现状并得出结论,从而提供切实可行的解决方案。但是,每个工具都只有部分准确和有效。因此,它应该包含一个声明,说明其可靠性和有效性。
科学测试的开发步骤
构建科学测试有一些步骤。
步骤 1:文献综述
每个科学研究都始于一个概念,科学测试也具有相同的效果。为了了解研究人员如何解决正在讨论的构建,以及科学家或其他专家过去如何衡量此构建,未来的测试设计人员应首先查阅研究文献。通过评估该领域的现状,研究人员和医生可以避免重复以前的工作,并避免导致其前辈误入歧途的陷阱。为本地使用和出版构建测试可以从最近的研究综述中受益。
评估可能会确定改进的领域,甚至可能找到一种现有的工具,可以满足测试创建者的需求,而无需花费设计从第一步开始测量的所需时间、金钱和精力。但是,遇到与自己类似的测量的潜在测试开发人员应该等待放弃自己的雄心壮志。该测试可能需要更强大的可靠性和有效性基础或足够的规范样本。
步骤 2:定义构建
对感兴趣的特质进行深入描述使测试创建者能够全面地对该构建进行采样。定义可以包括指向所需属性存在的行为、能力、缺陷、问题和特征。此外,简明的特征(如“安静”、“精力充沛”和“攻击性”)可以包含在定义中(Walsh & Betz,1995)。DSM-IV(美国精神病学协会,1994)可以作为人格评估有用定义的理想基础。文献综述应为构建定义提供信息。
步骤 3:测试计划和布局
对于任何研究,研究人员都试图从他们感兴趣的人群中抽取一个有代表性的样本。有代表性的样本与总体具有相同的相关特征水平。测试构建者试图开发一种测量从总体中抽取的有代表性样本的工具。但是,此样本和总体包含行为而不是人。Anastasia(1984,1988)将总体称为行为域,包括测试旨在衡量的整个行为范围。例如,研究人员可能试图测量语言能力,这是一个广泛而雄心勃勃的目标。这位研究人员将尝试编写项目以从整个语言能力领域引发有代表性的语言行为。
步骤 4:设计测试
对于测试创建者而言,提供给测试参与者的指南应该与实际对象一样认真对待。Kline(1986)为制作说明提供了基本指南。它们在这里采用修改后的形式。首先,保持说明简洁。在此之后,使它们尽可能简单、明确且没有修饰性从句。仅使用示例来进一步解释说明。Kline(1986)建议采访在某些方面失败的测试参与者(可能是在项目试用期间),以了解他们试图做什么。即使说明对于每个部分基本相同,每个测试也应以一组说明开始。通过使用诸如之前和如上所述之类的短语,可以使重复更容易接受。
步骤 5:项目试用
细心的测试设计人员最终应该拥有一个完成的工具,并具有雅致的排版和易读的排版。如果您创建了一个设计良好的测试表单或表单,您现在可以将其管理给一个旨在具有代表性的样本,称为试用样本。就相关特征而言,试用样本应与最终目标群体相似。
步骤 6:项目分析
测试的项目应具有区分能力和标准难度值。测试应该能够区分具有高或低水平被检查特征的个人。公平的测试有利于测试参与者而不是非测试参与者。用于测试或开发的人员样本。通过使用随机选择的样本(足够大)来消除偶然误差。此外,试用样本应与最终目标人群的重要特征相一致。
步骤 7:构建量表
收到结果后,测试开发人员会根据其统计特征对项目分析结果进行分类。最好的产品是那些具有中等难度和高区分度的产品,如前所述。通常,项目分为三组:(a)具有可接受统计数据的项目;(b)具有边际统计数据的项目,这些项目可能在修改后有用;以及(c)统计数据较差的项目,应将其删除。测试创建者经常使用因素分析来创建量表。
步骤 8:标准化测试
测试以其最终形式设置,即测试开发人员或出版商将管理并可能推广的形式,在将项目组合成量表后。然后,由经验丰富的检查员对第二个有代表性的样本(通常称为规范或标准化样本)进行测试。样本和管理应满足试用管理中列出的要求。例如,样本应足够大,并包含有关其属性(如性别和种族)的信息(Reynolds,1989)。此管理应在与最终版本实际常规使用相同的条件下进行。
结论
科学测试的开发需要遵循这些标准化步骤。标准化测试应完整、标准化、可靠、有效,并具有完善的规范。测试的有效性取决于测试创建者的技能。因此,必须开发一种本质上是标准化的并且适用于一般人群的测试。