数据分析平台下的调研结果有效性测评

一声长叹,不知道什么时候人生变成了受气包,不知道说什么,只剩下无奈苦笑了。今天分享一个调研结果有效性测评,这个应该是比较专业的测评了,据我所知一些心理学上的专业测评量表就是用的这些测量方法(不然人家专业心理测评量表是咋研究出来的呢?难道随随便便问几个问题,找几个人来回答,就能辨别出是否有心理疾病?)

一、信度

什么叫信度呢?就是进行重复的测量,产生相同结果的一致性与准确程度。信度可以从3个方面来分析:稳定性、内在一致性与等价性。

稳定性分析,叫做重测信度,就是编写好量表后,叫同一波人,做一次测量,在隔一段时间后,通常为1-2周,再对同一份量表再测一次测量,最后计算两次测量总分的相关系数,相关系数越高,稳定性越好,重测信度越高。

内容一致性分析:alpha系数法:\alpha =K*(1-\sum Qi^2/Qt^2)/(1-K) 其中K为量表中题目的总数,Qi为第i个题目得分的方差,Qt为总得分的方差

等价性分析:编码员信度分析:将分析单位(如单词、符号、主题等)至于同一个分类内容中,不同的编码者独立编码,如果能产生一致的结果,则信度较高。霍斯提公式:信度=2m/(m1+m2),其中2个编码员做了m1和m2个单位的编码,其中m是相同的编码数。

二、效度

什么叫效度呢?就是所测量的是不是研究者想要的,或者多大程度上是他想要的。

效度主要有3种类型:内容效度、校标效度、结构效度。

内容效度:计算每个题的得分与总得分的相关系数,如果相关系数不显著,说明该题对总得分的贡献太低,最好剔除。题项与总得分的相关系数越高,说明量表的内容效度越高。

结构效度:量表中各个题的难易度与鉴别度

难易度=(PH+PL)/2,其中PH和PL分别为高分组和低分组的通过率。

将反向题作逆向处理后,计算累加量表的总分,将总分按由小到大顺序排列,划分成人数相等的4个组,分数最高和分数最低的两个组分别为高分组和低分组,计算这两组的被访者在每道题上的通过率PH与PL,

PH=(非常同意+比较同意)的比例,PL=(很不同意+不太同意)的比例,难易度越大,表示该题越容易通过

鉴别度=PH-PL,鉴别度越大,对某个题项反应的差异越大,持肯定、积极与否定、消极比例之差越大。鉴别度稍大一些比较好。

其中内容一致性分析、内容效度、难易度、鉴别度是很容易用代码实现的

 

你可能感兴趣的:(数据分析平台下的调研结果有效性测评)