有个问题一直不理解。是关于信度。

     戴海崎的书，P55    第三节 提高测量信度的方法

1.被试方面  的 第二段，倒数第三行“此外，若团体的平均水平太高或太低，同样会使测验总分的分布变窄，低估测量的真正信度。”

  想问一下，为什么把团体平均水平影响信度的原因又扣回了团体内部水平的离散程度？？？难道团体的平均水平和团体内部水平离散程度是一回事？

  信度指的是测量结果的稳定性程度。。那举个例子，把高考题给小学生做（即被试团体水平较低的情况），所得结果分数都很低，而且每一次测量分数都很低，这不是很稳定吗？？信度不应该很高吗？（只是没效度罢了），为何说平均水平太高或太低会低估真正的信度？？  

  求解。

“信度是测量结果的稳定性程度。”这是信度的定性描述，这里的“稳定性”只是个抽象概念。但心理测量实际应用中要把这个抽象的“稳定性”给操作化，通常大都用求取“相关系数”来估计信度值。

相关系数受被试全距（分布）影响很大，而分布情况主要由离散程度、平均数决定。所以这些都影响相关系数，进而影响信度估计值（注不是信度本身）。平均水平太低或太高，都会使计算出来的估计值较实际的值偏低。（可见散点图）

对于你所举的例子，高考试卷给小学生做，他们的分数是都是很低，每次分数都很稳定，若根据信度的定性描述，信度是高（当然是毫无效度的）。但是在实际应用中，信度高低通常用信度系数（信度值）来表示的，其所说的高低，也常指值的大小。而这个值又是以“相关系数”来估计的。这样假设小学生群体两次施测都全部得1分，那么算出来的信度估计值即相关系数近于等于0，那么很显然信度很低。

总之，心理测量实际应用中，我们不能用“稳定性”直接描述信度值，（很稳定与有点稳定，你能说出他们差多少吗？），我们要把“稳定性”量化，于是就有了用“相关系数”来作为信度估计值。书上那节所说的高低也即指估计值的高低。这样就有了凡是影响相关系数的因素都影响以相关系数为估计值的信度。

（测量中很多与统计中相关密切联系，楼主若还有不解可再复习统计相关部分的主要思想）

嗯，好久没来论坛啦哈，这个问题呢，我说说我的看法哈。。。。。
团体的平均水平太高（大家都得高分）或太低（大家都得低分），这就出现了所谓的天花板或是地板效应，大家的分数分布就会集中在高分段，或者低分段，这就使得分数的分布范围变小。然而“分数分布的范围越广，信度值就越大”，反之，分布范围变小，信度值就降低。所以取样时要保证被试群体的异质性。
团体的平均水平和团体的内部的离散程度不是一回事，这个团体的平均水平过高应该是相对于常模而言的，平均水平过高，说明所取的被试分数都比较高，差异较小。。。同理，平均分数过低也是这样。。。

fuzhouzsh 发表于 2011-6-27 14:01
“信度是测量结果的稳定性程度。”这是信度的定性描述，这里的“稳定性”只是个抽象概念。但心理测量实际应 ...

太感谢了，你说的极其透彻，解决了我多天的困惑  

熊位锦 发表于 2011-6-27 15:04
嗯，好久没来论坛啦哈，这个问题呢，我说说我的看法哈。。。。。
团体的平均水平太高（大家都得高分）或太 ...

谢了。祝你暑假达成愿望啊，哈哈

勤思教育 发表于 2011-6-27 13:04
信度的估计通常是求相关系数，散点图是表示相关的一种直观方法。散点图里会有测验分数分布的问题，楼主可以 ...

好的，谢谢。。。

萧紫宁 发表于 2011-6-27 22:16
谢了。祝你暑假达成愿望啊，哈哈

嗯，刚看了一下勤思教育的答复，觉得根据他的理解应该是最简单的，我开始没看到最后一段话。这个问题的另外一种解释可以参照戴老师的P76页关于测验难度对测验的影响的倒数第二行，有个公式，那里有详细的说明。。

熊位锦 发表于 2011-6-27 15:04
嗯，好久没来论坛啦哈，这个问题呢，我说说我的看法哈。。。。。
团体的平均水平太高（大家都得高分）或太 ...

说的很好呀！但是你说应该注意团体的异质性，异质性越大，信度越高。。又是那个老问题，郑日昌那本书写的正好相反。。我都受不了这快了。

fuzhouzsh 发表于 2011-6-27 14:01
“信度是测量结果的稳定性程度。”这是信度的定性描述，这里的“稳定性”只是个抽象概念。但心理测量实际应 ...

帮我解释下，为啥两次小学生都只得到一分，然后相关为零呗。。我觉得既然两次都是零，应该是高相关呀！！

加油好孩子 发表于 2011-6-30 17:10
帮我解释下，为啥两次小学生都只得到一分，然后相关为零呗。。我觉得既然两次都是零，应该是高相关呀！！

散点图说明  分数集中到低分段    就是靠近坐标原点的那一小块区域  相关很低  
文字说明就是  第一次考的不影响第二次考的   第一次也不会 第二次也不会 有个第三变量就是知识水平  影响两次成绩   第一次和第二次没什么关系  
公式说明就是    XY共变/X变Y变    XY共同变化的那个协方差算出来是很低的