回应偏差会对您的调查结果产生不利影响。以下是您可以采取的措施来对抗偏差。调查之所以成为一个有力的工具,是因为它能够获取关于目标受众的真实信息和数据,而不是依靠试错方法。然而,为了使这些数据有用,它必须是无误差的,更重要的是无偏差的。怎么消除反应偏差?首先要做到研究您的受众众所周知、构建调查流程,然后构建提供完整的答案列表,最后平衡设计和文本。
一、什么是回应偏差呢?
当参与者故意或无意识地偏离向调查问题提供真实回答时,就会出现回应偏差或者回答者偏差。这会导致数据不一致,甚至更糟糕的是对所收集数据的错误分析。
在没有面试者的情况下,避免回应偏差在网络上变得更加困难。因为回答者的回答没有监控,很难确定他/她对问题的解释。因此,在发布调查之前,减少回应偏差的潜力应该成为您的首要任务。
二、如何消除回应偏差呢?
以下是我们编制的五项检查清单,帮助您避免调查中的偏差可能发生。
1、研究您的受众众所周知
了解您的目标受众对于制作全面的调查至关重要。当您希望调查无偏差时,您需要确保调查符合目标受众的需求。
- 专业提示:选择受众熟悉的词语。
对受众基础的理解不足可能导致回答不一致和部分完成的调查。好消息是,了解您的受众是一个相对容易克服的挑战。了解您的目标受众的更好方法之一是找到以下问题的答案:受众成员有什么共同点?您特别感兴趣了解目标受众的哪个方面?(例如:年龄、性别、教育程度、职业)您的目标受众回答调查的动机是什么?在获得目标受众的有意义的见解之后,您可以进行下一个检查清单的项目:构建问题。
注意:
1、当设计调查问卷问题时,请注意不要引导回答者偏向某个答案。要小心不要使用强烈、极端化、情绪激动的问题,因为这些问题可能会让受访者感到不快,并且很可能导致偏见。专业技巧:避免使用诸如“恐怖分子”、“灾难”、“恐惧”等词语。
2、在撰写调查问卷时,还需要考虑用户对问题的理解程度。对于对你的产品不熟悉的人来说,他们可能无法给出准确的答案。如果他/她不得不随机选择一个答案只为完成调查,这将降低你的数据准确性。
下面是一个例子,说明了一个好的调查问题如何在准确的数据收集方面胜过一个糟糕的问题。
To-do:您在易用性方面更喜欢以下哪个?-Survey Planet-Pollfish-Zoho Survey-None
Not-to-do:您对Zoho Survey的易用性满意吗?-是-否
(请注意:To-do的例子列出了可能熟悉的服务列表,这样可以创建更广泛的调查范围,使得获得无偏见的答案更容易。另一方面,Not-to-do的例子则是“毁灭调查”的问题。不仅很难理解回答者对比其他服务时实际感受如何,而且答案选项的缺乏多样性使得更难分辨哪些答案是有偏见的,哪些是无偏见的。)
在调查问卷问题中,避免使用绝对词语(每个、所有、总是等)也非常重要。这些词强迫回答者给出不明确的反馈。
让我们再来看一个中立调查问题和有偏见调查问题的例子:
To-do:您多频繁在线进行调查?-每月不到10次-每月10-20次-每月20次以上-从不
Not-to-do:您总是在线进行调查吗?-是-否
在To-do的例子中,回答者可以自由选择以绝对的确定性回答。另一方面,Not-to-do的例子由于答案选择模糊而造成混淆。该问题并没有量化作为“总是”的频率,因此,绝大多数回答者很可能回答“否”。这再次损害了调查数据的准确性,并且没有提供太多具体信息供分析。
2、构建调查流程
常常聚焦于相似想法的问题以及答案选择按照模式进行的调查可能会在调查数据中产生错误的正面结果。例如,当答案选择重复出现(比如,a-a-b-a-a-b)时,在调查的一部分中,回答者的本能可能是坚持模式并不公正地回答调查。随机化问题模式和答案序列是一种常用的做法,以避免这种偏见。
另一种解决这个问题的方法是采用分支式调查流程,其中调查问题是前面问题的逻辑延伸。例如,询问回答者基于易用性偏好的服务,并根据答案,跳转到另一个问题,询问特定服务的易用性评级。
- 专业提示3:在在线调查中,每页呈现2-3个问题。
当调查中的所有问题都在一个页面上呈现时,回答者对未来问题的看法可能会对之前的回答产生偏见。此外,如果一开始就给人一种无休止的感觉,回答者可能会对调查的长度感到厌烦。
3、提供完整的答案列表
在形成问题时很多思考都投入其中,但在创建答案选择方面似乎没有这么多努力。为了确保调查者对问题的所有可能选项有清晰的了解,提供一个详尽的答案列表至关重要。
- 专业提示4:"不确定"、"中立"、"不知道"等答案选择是很好的退出选项。
有许多意义紧密相关的答案选项在数学上也可能引起无法避免的偏见。为了消除这种情况,始终通过答案选择给调查者一个方法,让他们能够做出明智的决策,我们知道,这样的决策是没有偏见的。通过提供退出选项,调查者可以选择他/她最能与之相关的答案,而不是完全跳过问题。这样,我们就不会对未回答的问题及其可能的解释感到困惑。
- 专业提示5:在有可能的情况下,提供一个数值刻度是消除这种错误的好方法。
下面我们有两个更多的调查问题的例子:
一个在编号刻度上提供答案选择,另一个则没有:完成待办事项在1到5的刻度上(1代表最不满意,5代表最满意)
您对Zoho Survey的易用性有多满意?-1(非常不满意)-2(有点不满意)-3(中立)-4(有点满意)-5(非常满意)
不要进行如何评价Zoho Survey的易用性?-不错-好-差数值刻度问题(在待办事项中显示)
为调查者提供了简单且一致的选择,没有偏见。而不要进行则提供了两个倾向于积极刻度的定性选择,但只有一个倾向于消极的。这样,即使它们与回答者真实信仰不一致,积极的答案也有更大的可能性被选择。现在,一旦分析了目标受众、精心设计了问题、构建了调查结构并确定了答案,您的重点应该放在为实现最佳影响力而创建独特的调查设计上。
间隔问题(显示在待办事项中)为回答者提供了简单和连贯的选择,没有偏见。而非间隔问题提供了两个倾向于积极评价的定性选项,但只有一个倾向于消极评价。这样一来,即使与回答者的真实信念不一致,积极的答案被选择的概率也更大。现在,对受众进行了分析,问题经过精心设计,调查结构清晰,答案得到确定,你的重点应该转向创建一个独特的调查设计以实现最佳效果。
4、平衡设计和文本
在进行在线调查时,文本和视觉之间的和谐至关重要。常常,不成比例的图像或页面元素会减弱调查的效果。缺乏适当的设计可能会引起回答者的视觉不适和分散注意力,从而导致无意识的偏见产生。
良好的设计也应该适用于移动平台。回答者更喜欢简洁明了的调查,可以在任何情况下进行,如上下班途中、休息片刻或悠闲的周六下午。
此外,大多数回答者习惯使用移动电话参与调查。如果调查在移动设备上不具有响应性,可能会导致回答者放弃调查,从而导致因数据收集不完整而产生偏倚。
现在,你已经完成了这五项任务,准备好启动你的调查,获得准确、无偏见的数据,并将其转化为有信息价值的见解。To-do或Not-to-do将不再是一个问题。想要立即构建调查问卷吗?请查看Zoho Survey!