# Cognitive Work of Hypothesis Exploration During Anomaly Response ソース: https://queue.acm.org/detail.cfm?id=3380778（Cloudflare 403 のため Wayback Machine 経由で取得: http://web.archive.org/web/20251212061401/https://queue.acm.org/detail.cfm?id=3380778） | 著者: [[Marisa R. Grayson]]（[[Mile Two]] 認知システムエンジニア） | ACM Queue Vol. 17, no. 6（2019年） ## 概要 Web 本番システムのインシデント対応における「異常応答(anomaly response)」の認知作業、とりわけ**仮説生成・探索**を、認知システム工学(cognitive systems engineering)の手法で分析した論考。[[SNAFUcatchers Consortium]] が収集した事例データベースから4件のうち2件を詳細に扱う。同じ ACM Queue 号には [[Richard I. Cook]] の "Above the Line, Below the Line"（https://queue.acm.org/detail.cfm?id=3380777、未 ingest）と [[Laura Maguire]] の "Managing the Hidden Costs of Coordination"（https://queue.acm.org/detail.cfm?id=3380779、未 ingest）が併載されており、三部作的な位置づけ。 ## アノマリー応答の3つの認知活動 1. **異常認知(anomaly recognition)** — 説明を要する所見(findings)の集合を収集・更新する。 2. **仮説探索(hypothesis exploration)** — 所見を説明しうる仮説を生成・修正・検証する。 3. **応答管理/再計画(response management / replanning)** — システム完全性の維持・重要目標への影響緩和・介入決定のため進行中の計画を修正する。 異常とは「観測されたものと期待されるものの乖離」であり、観測者が持つシステムの心的モデルに依存する。相互依存性の規模が増すほど仮説探索は難化する一方、多様な視点の協働が仮説候補の幅を広げる（早すぎる絞り込みの回避）。 ## 分析手法 - データ源: 4件のインシデントのポストモーテム記録(IRC/Slack チャットログ)。行動そのものは記録されないが、above the line(意図・計画の表明)と、that crosses the line(観測された信号)は記録される。 - 手法: process tracing(Woods 1993)。events / hypothesis generation / model revisions / interventions / stance の5要素で軽量コーディング。 - ケース由来: [[SNAFUcatchers Consortium]] のケース DB(https://www.snafucatchers.com/about-us)。 ## ケース1: データセンター間の広範なレイテンシ 2つのデータセンター間のバックアップ経路が、直前の週の変更でデータセンター内完結からデータセンター間経由に切り替わっていた。この変更自体はテストされておらず、週次バックアップが起動して初めて影響が顕在化した。エンジニアは memcache 性能劣化説とネットワーク輻輳説の間で仮説を行き来し、より広いアクセス権を持つネットワークエンジニアの参加によって「バックアップ経路がオーバーサブスクライブされたリレーカードを飽和させている」という説に収束、旧バックアップ方式へのロールバックで解決した。約1時間で仮説群が line of commitment を超えて行動に転じた。 ## ケース2: 消えるリクエスト ロードバランサ配下のテスト用 tee(分岐)ルールが、以前存在していた古い(廃止済みボックスを指す)ルールを意図せず再活性化し、health check を経由しないため一部リクエストがサイレントに欠落した。初動のアプリケーション層中心の調査は行き詰まり、ロードバランサへのアクセス権を持つネットワークエンジニアの参加で古いルールが発見された。tee ルールと旧ルールがなぜ相互作用したかは、記事執筆時点でも完全な合意に至っていない(明確な収束を見ないケース)。 ## 発見された仮説探索空間のパターン 1. line of commitment 超えの複数仮説・介入が並行して存在する。 2. 短時間に多数の仮説が生成される。 3. 1つの仮説に着手した後も、追加の行動・仮説生成が継続する。 4. 高度に動的なシステムの不透明性・複雑性が「離れた場所に現れる効果(effects at a distance)」を生み、仮説探索を複雑化する。 ## 横断的知見 - Cook の「Above the Line, Below the Line」の line of representation 図式と対をなし、本論考の仮説群は line of representation を越えてくる異常信号によって above the line で生成される、という構図を提示する(本文中で明示的に相互参照)。 - Woods の定理(finding and filling gaps in understanding の重要性、STELLA 2017)を、チャットログ中でエンジニアが互いのメンタルモデルを明示的に更新するコメントの頻出という実証データで裏付ける。 - 直近の変更が優先的に疑われ、時間的に離れた変更(1週間前のバックアップ経路変更)の追跡が遅れるという時間バイアスは、[[ヒンドサイトバイアス]]とは異なる種類の調査バイアス——「時間的近接性バイアス」とでも呼べる現象——として、[[仮説駆動RCA]]の未解決の問い（深掘りの停止条件・優先度付け）に新しい軸を追加する。(Source: 本ソース) ## 出典 - 本文全体(Wayback Machine アーカイブ経由で全文取得) - 参考文献11件のうち特に Woods 1993(process tracing)、Woods & Hollnagel 2006(Anomaly response / Automation surprise)、Woods 2017(STELLA report)