专著第 71 号 · 胡志英
附录二 R1–R9 编码手册
本手册可脱离正文使用。手册内不出现章名与构念名,读数一律以 R1 至 R9 出现,以降低编码者被理论名污染的风险(第十二章第六节风险二)。
通用纪律(九个读数共用):
1. 编码者不知实验条件、不知假设方向、不知本手册出自哪本书。
2. 训练集与正式材料分离。训练集上的分歧允许讨论到一致;正式材料上的分歧不得讨论抹平,须保留初始分歧并报告。
3. 二分判断报告科恩卡帕,连续量报告 ICC(2,1)。κ ≥ 0.70 或 ICC ≥ 0.75 为可接受下限;低于 0.60 时该读数视为不可测量,不得报告任何以它为自变量的结果。
4. 每个读数单独一轮编码,轮次间隔不少于三天,每轮材料重新随机排序。
5. 缺失必须分五类记录:未观察/未记录/被删除/无法转换/制度性不允许记录。不得统一编为空值。
| 记号 | 一句问法 | 怎么计 | 计入 | 不计入 |
|---|---|---|---|---|
| R1 | 这两处修改,是不是同一个后果引起的? | P(ΔK∩ΔA∣Y) − P(ΔK∣Y)·P(ΔA∣Y) | 两处修改共享同一证据编号且可互相指向 | 同期发生但归因链不同;只改口头原则;只改动作 |
| R2 | 换了载体,那条关系还在吗?被证伪时改了吗? | 载体变形试次中关系维持的比例;核心被后果证否时合法改写的比例 | 因果/规范关系维持 | 步骤相似度;表述相似度;权威宣布的核心 |
| R3 | 后来者不看原答案,能重建理由吗? | 能重建「何种条件下为何如此」的比例;重建后在新环境有效的后代比例 | 条件与例外一并重建 | 动作复现;结论复述 |
| R4 | 改的是规则参数,还是知识成立的边界? | 余差试次中五类边界(对象/样品/尺度/参照/作用)至少一类被修改的比例 | 边界修改并给出余差诊断依据 | 改参数;改措辞;未通过三道诊断门槛的偏差 |
| R5 | 下一轮最先改变问题结构的,换位置了吗? | 实际跨源转移率 − 保持事件数的随机置换期望 | 该事件确实改变了下一轮可选行动或评价规则 | 形式上谁先发言;讨论但未改变结构的事件 |
| R6 | 这次行动,改变了下一轮能做什么、能看见什么吗? | 行动前后可行集与可辨证据集分布的 Jensen–Shannon 距离,分别计 | 基于实际可达概率(含权限与资源) | 菜单上的选项数;被讨论但不可达的方案 |
| R7 | 撤走那件共享物,两端还接得上吗? | 间接效应占总效应比例 ab/(ab+c′);四件套并列为四条中介 | 四件套分别计分 | 四件合并总分;单方归档的文件 |
| R8 | 换了表示,第三方还判得对吗?要补多少才判得对? | 换表示后关键因果与反事实判断的正确率保持比例;恢复正确判决所需最少桥接信息量 | 来源完整度相同时的差异 | 来源完整度本身;原团队在场时的复建 |
| R9 | 换了载体,那条约束还施加同向同界的约束吗? | 预注册关键关系在载体转换后仍约束选择与结果的程度;丢失、倒置或错误泛化的比例 | 删除实验与近邻替换均通过 | 语义相似度;流程外观相似度 |
三项共同外部效标(不属于任何一个读数,用于判定读数是否有用):
· E1 陌生任务迁移:第 14 天更换材料、尺度与干扰因素后的功能达成率。
· E2 异常发现时间:从异常出现到被记入可修改位置之间的轮次数。
· E3 第三方复建正确率:未参与原任务者只凭材料复建事件的正确率。
手册的一条已知缺陷:九个读数没有一个是分布量,全部以任务或共同体为单位取值。使用者若需判断参与是否集中在少数人身上,本手册不提供工具(第十一章第五节)。
—-