可靠性和有效性问题
在心理学探索方法领域,任何测试或试验中可靠性和有效性的错误都会极大地损害探索的价值。因此,在任何科学论文、期刊或试验发表之前,其结果必须首先满足可靠性和有效性的标准。不幸的是,不满足这些标准的情况可能会导致不道德的探索和虚假或欺骗性的说法。
什么是可靠性和有效性?
在科学研究方面,可靠性的描述是在规律维度下存在稳定和一致的结果。从另一个角度来看,假设任何使用测试来衡量特定问题的形式的心理学探索。被认为可靠的测试每次进行时都会显示相似的结果。这种一致性和可靠性增加了测试在探索中使用的价值。
有效性是指测试或测量工具真实和准确的术语。换句话说,有效的测试或工具测量的是它声称要测量的实际单元。日常生活中有很多有效性的例子。例如,假设一个驾驶执照,只有当驾驶员的所有信息都真实准确时,它才是有效的。同样,在心理学探索中,只有当结果准确反映测试声称要测量的对象时,才能认为测试有效。
可靠性问题
在认知探索方法中,一些常见的错误可能会影响研究的可靠性。这些类型的问题包括:
方法误差 - 系统误差可能是由于研究人员的行为或测试环境造成的。关于系统误差的问题包括:
研究人员是否正确使用了测量工具?该工具是否正常工作?
测试的环境是否影响了测量的结果?
个体差异误差 - 在个体差异误差中,可靠性问题源于试验的实际受试者。关于个体差异误差的问题包括:
受试者是否使用了有偏差的行为或答案?
他们的身体状况如何?
身体不适的受试者可能无法像平时那样表现,从而影响研究的结果和可靠性。想象一下,一项测试旨在衡量不同运动队的运动能力;然而,其中一个测试队在同一天食物中毒。这可能会影响结果的可靠性。
有效性错误
类似于可靠性中的问题,探索中的某些类型的错误也可能危及测试的有效性。其中许多错误是已知的。
成熟度 - 成熟度可能会影响长期研究结果的有效性。例如,时间的推移是否会影响测试的实际表现?在此期间,一个聚会或测试可能会受到什么影响?
偏差 - 在参与者选择中可能出现的偏差可能会对研究的有效性产生负面影响。例如,当参与者的选择带有偏差时,研究结果在人群中普遍化的能力就会受到损害。
交互效应 - 交互效应会影响涉及探针或一项研究中涉及多个测试的案例的有效性。例如,再测试的操作可能会干扰随后进行的另一个测量或测试。考虑一项旨在衡量阅读理解能力的测试。要求测试者在一个会话中阅读五篇论文,每篇论文有十页长。由于阅读多篇冗长论文所导致的因素,关于他们理解能力的结果的有效性可能会受到影响。许多因素会影响任何科学论述或研究的价值和可信度。评估可能降低研究可靠性和有效性的错误是科学体系中最重要的先例之一。
定性研究中的可靠性和有效性问题
评估研究结果的可靠性要求实验者和卫生专业人员根据所采用方法的操作和适用性以及结论的完整性来判断研究的“可靠性”。定性研究经常受到批评,因为它缺乏足够的科学严谨性,其所支持的方法的论证不足,逻辑程序缺乏透明度,研究结果仅仅是容易受到实验者偏差影响的个人意见的集合。对于新手实验者来说,在进行定性研究时展示严谨性是困难的,因为关于应根据哪些标准来判断此类研究还没有达成共识。
虽然用于建立定量研究有效性和可靠性的测试和度量不能应用于定性研究,但关于诸如有效性、可靠性和普遍性等术语是否适用于评估定性研究的问题仍在不断争论。在最广阔的环境中,这些术语是适用的,有效性关乎所采用方法的完整性和操作性,以及结果直接反映数据的完美程度。同时,可靠性描述了所用逻辑程序中的稳定性。但是,如果定性方法在哲学立场和目的方面与定量方法不同,那么建立严谨性的替代方法也是适用的。
虽然研究人员和其他定量实验者已经彻底探讨了可靠性和有效性问题,但民族志研究者对它们的处理却零散而不规律。各种研究分析了民族志研究者所定义和解决的这些结构。将民族志设计中的可靠性和有效性问题与其在实验设计中的对应物进行了比较。对民族志研究可信度的陷阱进行了总结,并从实地研究方法中得出。旨在增强可信度的策略贯穿于整个调查过程——研究设计、数据收集、数据分析和结果呈现。当前教育民族志文献中说明了解决各种类型偏差的常用方法。
克服可靠性和有效性问题的策略
这包括:
解释可能影响结果的个体因素。
承认偏差,并持续批判性地反思方法,以确保数据收集和分析的充分深度和适用性。
细致的记录保存,展示清晰的决策过程,并确保对数据的解释是一致且透明的。
建立比较案例/寻找不同描述之间的相似之处和差异,以确保代表不同的视角。
包括参与者陈述的详细和丰富的逐字描述,以支持研究结果。
在数据分析和后续解释过程中,展示研究过程的清晰性。
与其他研究者互动以减少研究偏差。
回应者确认包括邀请参与者对访谈摘要进行注释,并确定最终主题和概括是否充分反映了所探讨的现象。
数据三角测量,即不同的方法和视角有助于产生更全面的结果。
结论
所有研究者都力求提供准确的结果。准确的结果既可靠又有效。可靠性意味着获得的结果是一致的。有效性是实验者衡量他们试图衡量的程度。可靠性或有效性方面的错误会对研究产生负面影响,需要采用适当的措施来避免此类错误。