SPSS 命令: SPSS WEIGHTED KAPPA

在浏览器中计算加权 Kappa

加权 Kappa 衡量两名评分者在有序量表上的一致性:相差一个类别的分歧比相差三个类别的分歧获得更多部分得分。

免费 · 无需注册 · 文件留在本机 · 更新于 2026年10月18日

能告诉你什么

Crosstabs 在你的设备上运行与 SPSS WEIGHTED KAPPA 对应的过程,提供线性或二次权重、渐近标准误、相对随机一致的 z 检验、置信区间以及完整的评分交叉表。

  • 将相近分歧计为部分一致后,两名评分者超出随机水平的一致程度。
  • 该一致性是否显著优于随机(使用零假设下标准误的 z 检验)。
  • 基于渐近标准误的 kappa 置信区间。
  • 从评分者交叉表中看出分歧集中在哪些类别。

适用场景

适合使用

  • 两名评分者在有序量表上为相同对象评分:严重程度分级、作文评分、Likert 型评分等。
  • 同一评分者在有序量表上的重测一致性,以两次评分作为两个变量。
  • 报告评分者间信度且期望使用二次加权 kappa 的场合(它近似于组内相关系数)。

改用其他方法

  • 类别无序(诊断 A、B、C):使用交叉表统计量面板中的非加权 Cohen kappa。
  • 三名及以上评分者:使用 Fleiss kappa。
  • 连续测量值:使用信度分析中的组内相关系数或 Bland-Altman 类分析。

在 Crosstabs 中如何操作

  1. 01

    打开数据

    打开每行一个被评对象、每位评分者一列的文件,然后切换到“统计”模式。

  2. 02

    选择加权 Kappa

    在“一致性与诊断”组中选择“加权 Kappa”(WEIGHTED KAPPA)。

  3. 03

    选择两名评分者

    将“评分者 1”和“评分者 2”设为两个不同的变量。类别为两位评分者取值的有序并集;非整数数值评分会被截断。

  4. 04

    选择权重

    将“加权方式”设为线性(1 − |i − j|/(k − 1))或二次(1 − (i − j)²/(k − 1)²),并选择“置信水平(%)”。

  5. 05

    运行

    如有权重,将其声明为频数权重(当每行代表一种评分组合及其频数时很有用),然后点击“运行”。

计算示例

以下结果由 Crosstabs 引擎在构建本页时根据模拟数据实际计算得出,并非手工填写。

数据

50 篇模拟作文,由两名评分者按 1–5 分评分。每位评分者的分数为作文真实水平加上 −1、0 或 +1 的随机偏移(评分者 2 偶尔宽松一分),并限制在 1–5 之间。固定随机种子。

加权 Kappa
评分(加权方式)NKappa渐近标准误Z显著性95% 置信区间
rater1 – rater2(线性)500.7730.0477.69<.0010.681 – 0.866
rater1 – rater2(二次)500.9050.0256.45<.0010.856 – 0.954

面板运行两次,每种加权方式各一次。Z 使用随机一致性零假设下的标准误;区间使用渐近标准误。

评分交叉表
rater1 \ rater212345
172100
227100
300340
400155
5000210

结果解读

两名评分者对 50 篇作文中的 32 篇给出完全相同的分数,18 处分歧中有 17 处只相差一分,加权 kappa 将其计为部分一致:线性 κw = 0.773(95% 置信区间 0.681 – 0.866),二次 κw = 0.905(95% 置信区间 0.856 – 0.954)。二次权重对相差一分的分歧惩罚比线性权重更轻,因此当分歧多为相邻类别时,二次加权的值更大。

输出表格说明

加权 Kappa
N、kappa、渐近标准误、Z、显著性和置信区间。Z 使用随机一致零假设下的标准误,区间使用渐近标准误。
评分交叉表
评分者 1 与评分者 2 各类别的交叉计数;一致落在对角线上,相近分歧位于对角线两侧。

前提假设与注意事项

  • 两名评分者独立地对相同对象按相同的有序类别评分。
  • 线性权重假设类别等距;二次权重对大幅分歧的惩罚要重得多。
  • 至少使用两个类别;如果两名评分者只用了同一个类别,kappa 无法定义。
  • 任一评分者评分缺失的个案按成列删除排除。

结果如何验证

在含权重的 140 例参考表上,线性与二次加权 kappa、渐近标准误及零假设标准误与 statsmodels 0.15 的 cohens_kappa 一致到 1e-12,z 一致到 1e-10;kappa 还与 R irr 0.85 一致到 1e-12。 验证证据(英文)

常见问题

选线性权重还是二次权重?

线性权重对每一级分歧同等对待。二次权重对相差一级的分歧惩罚很轻,对大幅分歧惩罚很重;由于二次加权 kappa 近似于组内相关系数,它在许多领域是标准做法。请事先确定所用权重。

如何描述一致性的强弱?

面板采用 Landis 和 Koch 的标准:.20 及以下为轻微,.21–.40 为一般,.41–.60 为中等,.61–.80 为高度,.80 以上为几乎完全一致。这些只是粗略标签,而非严格界限。

评分者大多数时候一致,为什么 kappa 仍然较低?

Kappa 扣除了随机期望的一致。当几乎所有对象都落在同一类别时,随机一致本身就很高,因此即使一致很频繁,kappa 也只是中等。

为什么 Z 检验与置信区间使用不同的标准误?

检验关心 kappa 是否可能为 0,因此使用零假设下的标准误;区间描述估计值本身,因此使用渐近标准误。这也是 SPSS 遵循的惯例。

用你自己的数据运行加权 Kappa

打开 .sav、CSV 或 Excel 文件。所有计算都在浏览器中完成,文件不会离开你的设备。

打开分析工作区

SPSS 是 IBM Corp. 的商标。Crosstabs 与 IBM 无关联,也未获得 IBM 认可。