moralscience的个人博客分享 http://blog.sciencenet.cn/u/moralscience

博文

传统图示法,夸大差异性

已有 3599 次阅读 2022-2-17 23:58 |系统分类:科研笔记

在科学研究中,经常需要对特定内容聚焦,特别是放大,以便更为清晰、准确地观察。然而,用图呈现分析结果时,倘若不顾全距(range)地放大,就会误导读者,给人造成错觉,以为两个群体在某一问题上差异很大。如果涉及的问题是现实性的,很容易出现麻烦,例如,引起或加剧歧视。

在一项研究中(Hanel, Maio, & Manstead, 2019),研究者以B国人为被试,用3种方式呈现B国被试和P国被试的人类价值观评定结果,检验对外群体的态度在强调相似性或差异性时的后果。之所以把P国人选为外群体,那是因为P国人系居住在B国最大的移民群体,约有25%B国人对P国人的态度不太友好,50%P国人也认为B国人对他们持负面态度。总之,B国人对P国人的态度差异很大。

研究者使用的3种呈现方式是,叠加正态分布图、放大y轴刻度的条形图、不放大y轴刻度的条形图,它们分别能够突出两个群体之间的相似性或差异性。具体而言,叠加正态分布图能突出两个群体的相似性,放大y轴刻度的条形图能突出两个群体的差异性。研究者据此预测,与观看放大y轴刻度条形图的B国被试相比,观看叠加正态分布图的B国被试,对P国人会有更积极的态度,而观看不放大y轴刻度条形图的被试,其反应会落在前两者之间的某个位置。

研究者通过线上招募,得到有效被试251人,每一被试得到0.54欧元报酬,这相当于每小时8.19元的工资(研究中,被试的平均完成时间是237秒)。被试的平均年龄=37.30岁(SD=12.39),女性占62.65%162人有大学学位,88人没有大学学位(1人未报告教育水平)。所有被试都出生在B国,有B国国籍。

该项研究采用3水平的单因素设计,呈现类型(叠加正态分布图、放大y轴刻度的条形图、不放大y轴刻度的条形图)为被试间因素。将被试随机分配到3种实验条件。

研究者制作3类图,即叠加正态分布图、放大与不放大y轴刻度的条形图,用以显示2,264B国人和1,615P国人在10种价值观上的反应。对于每种价值观,分别制作3类图各一幅(见图1,安全价值观的例子)。所有10种价值观的平均PCR=88,平均AE=6,平均d=.31,即相似性大于差异性,效应量大于小效应量的标准。

实验时,同一类型的所有图一起呈现,即,被试同时看到表示价值观评定结果的10幅同一类型的图。告诉被试:“将会请你评定图上信息反映两个群体(例如,B国和P国)之间的差异性和相似性的程度。”随即提供欧洲社会调查网页链接,以此表明呈现的数据是真实的。接着,给被试呈现更具体的信息:“你将看到的是,来自两个国家的代表性大样本,对10种人类价值观的评定结果。会给你呈现10幅图,每幅图显示对一种人类价值观的反应。之后,请回答4个问题。”

4个问题在所有3种条件下都是相同的,即为实验的因变量。第1题:“B国人和P国人的价值观相似性如何?”第2题:“B国人与P国人容易相处的程度如何?”第3题:“如下7 对圆圈的哪一对能够最好地描述B国人与P国人之间的关系?”第4题:“对一名典型的P国人,你的总体评价如何?”对于第124题,要求被试在0(非常不同/非常不容易/非常负面)~100(非常相似/非常容易/非常正面)的滑动量尺上作答。第3题呈现7对重叠程度不同的圆圈(从毫无重叠到大约重叠80%),要求被试选择一对。

image.png 

1  描述相同数据的3方式:两条叠加的正态分布图、带有95%置信区间的两组条形图(一组

放大y刻度、一组不放大y刻度)(PCR=86AE=6d=.36Hanel, Maio, & Manstead, 2019

研究者首先检验教育水平是否调节图的类型的任何效应,即把教育水平(高、低)作为一个因素,进行二向分类的方差分析。结果显示,4个交互作用均不显著(p>.22),说明教育水平并不调节评定情况。

接着,研究者做4个一向分类的方差分析。结果表明,4个方差分析均显著;事后比较表明,正态分布图条件与放大y轴条形图条件的均值差异与预期的方向一致,说明两种条件下被试知觉的两个群体的相似性存在不同程度。被试报告的相似性最小的是第1题,即,B国人与P国人价值观相似性问题。与看到放大刻度条形图的被试相比,看到叠加正态分布图的被试,认为B国人与P国人的价值观更相似,也认为B国人与P国人更容易相处,彼此的距离更接近,B国人对P国人有更正面的评价。第1题的PCR<50AE>50PCR=2495%CI[13,35]AE=5195%CI[46,53]),即两组被试反应的差异性大于相似性。这是两种条件下的被试存在实际差异的例子。

研究者也发现,看到不放大y轴刻度条形图的被试与看到放大y轴刻度条形图被试之间的差异(PCR=1595%CI[6,25]AE=5595%CI[49,60]),亦即,两组被试反应的差异性大于相似性。因此,当前主流的呈现研究结果的方式,也就是用放大y轴刻度的图,会造成对真实差异的高估。平均而言,不放大y轴刻度条形图条件下被试的反应与正态分布图条件下被试的反应相当。

总体而言,该研究的发现,对心理学报告研究结果具有重要的警示作用。由于放大y轴刻度的条形图或线形图能够突出研究者意欲寻求的均值差异,因此,这样的图成为心理学中最常见的结果呈现方式。然而,使用放大y轴刻度的图,是有明显的不良影响,例如,给人带来有关群体之间存在极大差异的印象,很可能造成深远的误解或歧视。

参考文献

Hanel, P. H. P., Maio, G. R., & Manstead, A. S. R. (2019). A new way to look at the data: Similarities between groups of people are large and important. Journal of Personality and Social Psychology, 116, 541-562.



https://wap.sciencenet.cn/blog-2619783-1325788.html

上一篇:哪种呈现法,更容易理解?
下一篇:真研究结果,该如何呈现?
收藏 IP: 113.13.45.*| 热度|

16 侯丹 李世斌 杨韩 王平平 杨正瓴 李毅伟 张晓良 檀成龙 谢钢 杜占池 李学宽 郑永军 孙颉 张俊鹏 张鹰 马鸣

该博文允许注册用户评论 请点击登录 评论 (0 个评论)

数据加载中...

Archiver|手机版|科学网 ( 京ICP备07017567号-12 )

GMT+8, 2024-5-1 12:53

Powered by ScienceNet.cn

Copyright © 2007- 中国科学报社

返回顶部