付録C 訂正台帳の要約(287件)#
値を動かした訂正287件を、対象・列・旧値・新値・適用した規則・理由・決定者・日付つきで1件ずつ記録している。
値を動かした訂正は、すべて1件ずつ台帳に記録した(対象・列・旧値・新値・適用した規則・理由・決定者・日付)。2026-09-14時点で287件。
C.1 どの項目を直したか#
| 直した項目 | 件数 | 割合 |
|---|---|---|
| W(報酬) | 235 | 82% |
| F 職務内容(F1・F2・F4〜F7) | 22 | 8% |
| S 要求スキル(S4・S5・S9・S10・S12 と根拠文言) | 15 | 5% |
| R レポートライン | 7 | 2% |
| その他(片側のみ・枠外要求・選択式必須) | 6 | 2% |
| P 権限(P3) | 2 | 1% |
| 計 | 287 |
文章にすると、訂正287件の内訳は報酬235件(82%)、職務内容22件(8%)、要求スキル15件(5%)、レポートライン7件(2%)、その他6件(2%)、権限2件(1%)である。
訂正の8割強が報酬に集中している。これは判定が揺れたからではなく、取得したデータに金額が入っていなかったことを、実ページで確認して入れ直したためである(5.1②)。コード判定そのものの訂正は、F・P あわせて 24件である。うち18件は、公開前に F6・F7 を全件付け直したことによる(付録A.3)。
C.2 どの規則で直したか(件数順)#
| 規則 | 件数 | 内容 |
|---|---|---|
| 実ページの金額を使う | 90 | 取得時に金額が抜けていた求人を、実ページで確認して入れ直した |
| W出典の列を追加 | 66 | 値をどこから取ったかを記録する列を新設し、全行に付与した |
| 本文と照合して読み落としを直す | 20 | 給与欄の読み落とし |
| 同一企業3件の扱いを決めた | 16 | |
| 実ページの金額+年収の範囲を優先 | 15 | |
| 固定残業込みの表記統一 | 14 | 「No」を「記載なし」に統一(本文に記載がない以上「固定残業ではない」とは言えないため) |
| ★D-2 事業の立ち上げと、既存事業内の販売施策を分ける(F6) | 10 | 公開前の全件再点検(2026-09-14) |
| 欠測理由の訂正 | 10 | 実ページで確認した結果 |
| 経営企画はS5とする | 9 | |
| 「応相談」だけなら但し書きのみ | 8 | |
| そのほか18の規則 | 29 | ★E-2・★E-3・★J-4(いずれも公開前の再点検)・★C-S4補足・R7新設・★N-2・将来形の再点検・第4段階の不一致確認 ほか |
| 計(28種類の規則) | 287 |
文章にすると、件数の多い規則は、実ページの金額を使う90件、W出典の列を追加66件、本文と照合して読み落としを直す20件、同一企業3件の扱いを決めた16件、実ページの金額+年収の範囲を優先15件、固定残業込みの表記統一14件、事業の立ち上げと既存事業内の販売施策を分ける10件、欠測理由の訂正10件、経営企画はS5とする9件、「応相談」だけなら但し書きのみ8件で、残る18の規則が29件である。
C.3 訂正の決め方#
- 規則の追加・訂正は、すべて実務者(調査の責任者)が決めた。LLMが提案して採用された場合も、承認を取ってから「決定」として記録している
- 凍結した一致率は、コードを訂正しても再計算しない。訂正は台帳に規則と理由をつけて追記する(A.4)
付録D 一致率の全表(64セル)#
第4段階の64セルを「人の値/LLMの値」の形で全件掲載し、報告した集計値がこの表から再現することを確認した。
第4段階(無作為8件・8項目・完全独立)の、セル単位の突き合わせ表。
集計値は A.4 にある(一致率 50/64=78.1%・κ0.34・重み付きκ0.45/一致した50セルの内訳は 両方0=46・両方1=1・両方2=3/項目別の一致は F1 4・F2 8・F4 7・F5 8・F6 5・F7 4・P2 8・P3 6)。
行の表記(2026-09-14 決定):全表の行は、内部の行番号ではなく 「求人1〜8」の通し番号で示す。本文の匿名化の粒度に合わせるためであり、一致率の検証に行の識別子は影響しない。
表の読み方:各セルは「人の値/LLMの値」。✗ が付いたセルは、二者の値が割れたところである。
D.1 64セルの全表#
| 求人 | F1 | F2 | F4 | F5 | F6 | F7 | P2 | P3 | 一致 |
|---|---|---|---|---|---|---|---|---|---|
| 求人1 | 0/0 | 0/0 | 0/0 | 0/0 | 0/2 ✗ | 2/0 ✗ | 0/0 | 0/0 | 6/8 |
| 求人2 | 2/1 ✗ | 0/0 | 1/1 | 0/0 | 0/0 | 2/2 | 0/0 | 1/0 ✗ | 6/8 |
| 求人3 | 0/0 | 0/0 | 0/0 | 0/0 | 1/2 ✗ | 0/0 | 0/0 | 0/0 | 7/8 |
| 求人4 | 0/1 ✗ | 0/0 | 0/0 | 0/0 | 0/0 | 2/0 ✗ | 0/0 | 0/0 | 6/8 |
| 求人5 | 0/0 | 0/0 | 0/0 | 0/0 | 0/0 | 0/0 | 0/0 | 0/0 | 8/8 |
| 求人6 | 0/1 ✗ | 0/0 | 0/0 | 0/0 | 1/2 ✗ | 0/0 | 0/0 | 0/1 ✗ | 5/8 |
| 求人7 | 0/1 ✗ | 0/0 | 0/1 ✗ | 0/0 | 0/0 | 1/0 ✗ | 0/0 | 0/0 | 5/8 |
| 求人8 | 0/0 | 0/0 | 0/0 | 2/2 | 2/2 | 1/0 ✗ | 0/0 | 0/0 | 7/8 |
| 項目別の一致 | 4/8 | 8/8 | 7/8 | 8/8 | 5/8 | 4/8 | 8/8 | 6/8 | 50/64 |
D.2 A.4 の集計値との照合(2026-09-14)#
上の全表から独立に再計算し、A.4 に報告した集計値がすべて再現することを確認した。
| 照合した値 | A.4 の報告値 | 全表からの再計算 | 判定 |
|---|---|---|---|
| 一致率 | 50/64=78.1% | 50/64=78.1% | 一致 |
| κ(重みなし) | 0.34 | 0.344(小数第3位で丸めて0.34) | 一致 |
| 重み付きκ(線形) | 0.45 | 0.452(同 0.45) | 一致 |
| 一致した50セルの内訳 | 両方0=46/両方1=1/両方2=3 | 両方0=46/両方1=1/両方2=3 | 一致 |
| 項目別の一致 | F1 4・F2 8・F4 7・F5 8・F6 5・F7 4・P2 8・P3 6 | F1 4・F2 8・F4 7・F5 8・F6 5・F7 4・P2 8・P3 6 | 一致 |
| 感度分析(1件を除く) | 44/56=78.6% | 44/56=78.6%(求人4を除いた値) | 一致 |
κ の計算方法:8項目の64セルをまとめ、0・1・2 の3値の一致表から重みなしで計算した。重み付きκは線形重み(値の差の絶対値÷2)を用いた。値の分布は 人が 0=52・1=6・2=6、LLMが 0=51・1=7・2=6。
感度分析で除いた1件(A.4 ②)は 求人4 である。8件のうち1件を外すので、分母は64−8=56、分子は50−6=44 になる。
不一致14セルの向き:LLMが高い8/人が高い6。2段階の差(0と2)は3セルで、求人1のF6・F7 と 求人4のF7 である。F7で割れた4セルはすべて人が高い(A.4 ③のとおり、人側がF7の定義を営業実務まで含むと読んだもの)。
この付録の位置づけ:一致率は 凍結値であり、この全表の掲載によって再計算していない。表は、報告した集計値が実データから再現することを読者が確かめられるようにするために載せている。