ヒット、見逃し、誤警報

信号とは詐欺のことである

Hook Lineの世界は二値であり、画面は受信トレイです。メッセージは一通ずつ届き、その下には2つのボタンがあります。詐欺としてフラグを立てる(flag)か、信頼する(trust)かです。部分的な判定はなく、「あとで考える」もなく、異議申し立てもありません。受信トレイ自体はシードによって決まる決定論的なもので、シードとレベルが同じなら、メッセージの並び順は毎回まったく同じです。どのメッセージも2つの隠れた属性を持ちます。詐欺かどうかと、1から3までの尺度で測った巧妙さであり、そのどちらも表示されません。前者は本文だけから推し量るほかありません。ただしゲームはあとで教えてくれます。判定のたびに真実が示され、詐欺であれば、それが抱えていた危険信号の一覧が続きます。²

その隠れた二値が信号です。信号とは詐欺のことです。それ以外はすべてノイズです。これまで読んできた何もかもと同じように見える正規のメッセージというノイズ、正規に見せかけようとするメッセージというノイズ、そして誰が何のために自分に書いてきたのかという自分自身の思い込みというノイズ。Hook Lineの設計は骨格こそ単純ですが、かけてくる圧力は計算されています。あなたはただ読んでいるのではなく、不確実性のもとで分類しているのです。そして分類は必ず、4つのマスのいずれかに落ちます。

それら4つのマスは単なる採点表ではなく、検出理論の語彙そのものです。詐欺にフラグを立てれば、得られるのはヒットです。詐欺を信頼すれば、起きるのは見逃しです。正規のメッセージにフラグを立てれば、代償として払うのは誤警報です。¹ 正規のメッセージを信頼すれば、手に入るのは正棄却です。このゲームの成績表は混同行列であり、あなたの残高は、どの誤りがより高くつくのかを教えるコスト関数です。

4つの結果を平たく言えば

実際のプレイに現れるとおりに4つの結果をたどってみましょう。ヒットは気持ちのよいクリックです。本当に詐欺であるメッセージにフラグを立てると、ゲームはあなたの口座に50を入金します。うまくやれたという手応えがあります。見逃しはもっと鋭い。詐欺を信頼すると、ゲームは200を差し引きます。これが大物です。各ラウンドは1000から始まるので、たった一度の見逃しで開始残高の5分の1が消え、累計がマイナスへ沈むのを止めるものは何もありません。0で下げ止まるのは、リーダーボード用の表示スコアだけです。この非対称は意図的なものです。詐欺を信頼することは、正規のメッセージにフラグを立てることよりはるかに高くつき、ゲームはその差を残高で感じさせようとします。²

誤警報は用心の代償です。正規のメッセージにフラグを立てると、ゲームは60を差し引きます。詐欺を信頼したときよりは小さな罰則ですが、それでも痛みます。残高を丸ごと失ったわけではありません。立てるべきでない旗を立てて、時間と信用を無駄にしたのです。正棄却は静かな勝利です。正規のメッセージを信頼すれば、同じ50が入ります。ヒットほど劇的ではありませんが、良い判断が着実に積み上がっていきます。²

これらを検出理論の用語に対応させると、対応は正確です。詐欺にフラグ → ヒット。詐欺を信頼 → 見逃し。正規のメッセージにフラグ → 誤警報。正規のメッセージを信頼 → 正棄却。4つの結果は単なるラベルではありません。「正しい」あり方が2通りあり、誤り方も2通りあることを教えるための、ゲームなりの手立てなのです。ヒットと誤警報の違いは、フラグを立てたかどうかではなく、信号がそこにあったかどうかです。見逃しと正棄却の違いは、信頼したかどうかではなく、信号が不在だったかどうかです。¹

感度——違いが見分けられるか

検出理論は能力と構えを切り分けます。信号とノイズを見分ける能力があなたの感度であり、しばしばd′(ディープライム)という指標で表されます。Hook Lineにおける感度とは、メッセージを読んで隠れた真実を偶然以上の精度で推し量る力です。隠れたラベルが見えるのなら、感度など造作もないものになるでしょう。しかし見えません。頼れるのは本文だけです。ドメイン名、緊急さ、あいさつ、依頼、リンク。ゲームのメッセージ目録はどれにも巧妙さを3段階で評点しており、1が露骨、3が巧妙です。評点が高いほど手がかりは薄く、ありふれた日常というノイズに対して信号は弱くなります。²

レベル制が効いてくるのはそこです。1ラウンドは4通にレベル番号を足した数のメッセージを抱え、上限は10通です。そして巧妙さの下限があなたとともに上がっていきます。レベル1と2では1、レベル3からは2、レベル5からは3です。つまり受信トレイは5通から10通へ増えてそこで止まる一方、その足元で巧妙さの床が上がっていくのです。レベル5からは、目の前のメッセージがすべて巧妙さ3の集団、つまり読みにくいものから引かれ、しかもそれが5通ではなく9通、レベル6からは10通あります。そのうえ、上に進めるのは受信トレイをきれいに片付けたときだけです。次のレベルへのボタンは、詐欺を1つも信頼せず、本物のメッセージに1つもフラグを立てずに終えたときにだけ現れます。同じシードと同じレベルは、いつでも同じ順序の受信トレイを組み立て直します。あなたの感度は固定ではありません。環境によって目減りさせられるのです。²

感度とは、何通にフラグを立てたかではないことに注意してください。2つの母集団をどれだけよく区別できるかです。すべてにフラグを立てれば、多くの詐欺を捕まえられますが(ヒット率は高い)、同時に多くの正規のメッセージにもフラグを立てます(誤警報率も高い)。それでもd′は低いままかもしれません。分布を実際に分離しているのではなく、片側を選んで祈っているだけだからです。ゲームの巧妙さの上昇はここを直接突いてきます。分布の重なりは大きくなり、当てずっぽうの代償は高くなります。¹

反応バイアス——どこに線を引くか

感度が固定されているとしましょう。それでも、どこに線を引くかを変えればスコアは変えられます。それが反応バイアス、すなわち判断基準です。一方の反応が他方より起こりやすくなる度合いのことです。Hook Lineにおける基準とは、読むのをやめて「信頼」か「フラグ」かをクリックする内的なしきい値です。慎重なプレイヤーは、信頼する前にそのメッセージが本物だという強い証拠を求め、したがって気軽にフラグを立てます。信じやすいプレイヤーは求める証拠が少なく、より早く信頼をクリックします。ゲームの非対称な罰則は、理にかなった基準を用心の側へ押しやります。¹

なぜでしょうか。詐欺を信頼すると200かかるのに対し、正規のメッセージにフラグを立てても60で済むからです。見逃しは誤警報の3倍以上高くつきます。迷ったなら、フラグ寄りに傾けるのが合理的な一手です。数字を当てはめてみましょう。フラグは当たれば+50、外せば−60。信頼は当たれば+50、外せば−200。ですから、そのメッセージが詐欺である確率がおよそ31パーセント、ざっと10回に3回を超えると信じた時点で、フラグのほうが良い賭けになります。これが「転ばぬ先の杖」の基準であり、このゲームのコストのもとで期待損失を最小にする基準です。ゲームはこれを明示しません。残高で感じ取らせるのです。フラグを立てるよりも信頼するほうが速く負けが込む。その感覚こそが、基準をどこに置くかについての学習になります。²

反応バイアスは感度とは独立です。慎重でありながら感度が低いこともあり得ます。頻繁にフラグを立てるので素通りするものはほとんどありませんが、その一方で、見分けのつかなかった本物のメッセージに60、また60と焼いていくのです。信じやすくても感度が高いこともあり得ます。誤警報はほとんど出しませんが、読み損ねた詐欺は1つにつき200かかります。ゲームの設計はこのトレードオフを目に見えるようにします。同じメッセージ、違う基準、違う結果。4つの結果は単なる成績ではなく、あなたの戦略の診断結果なのです。¹

盤面としての混同行列

4つの結果を2×2の表のマスだと考えてください。一方の軸は真実、すなわち詐欺か正規か。もう一方の軸はあなたの判断、すなわちフラグか信頼か。マスを埋めれば、それがあなたの混同行列です。詐欺にフラグ → ヒット。詐欺を信頼 → 見逃し。正規にフラグ → 誤警報。正規を信頼 → 正棄却。ゲームはこの表をリアルタイムでは見せてくれませんし、ラウンド終了時の要約もその半分しか埋めません。2種類の誤りは別々に報告されます。信頼してしまった詐欺と、フラグを立ててしまった本物のメッセージです。ところがヒットと正棄却は、正しい仕分けの数としてひとまとめにされてしまいます。行列全体が痕跡を残す場所は残高です。クリックのたびに、そのマスの数だけ残高が動きます。²

ゲームから見た表は次のとおりです。

これは抽象論ではありません。あなたの画面そのものです。クリックのたびに、あなたはどれかのマスに着地します。ゲームの採点は、その行列を意味あるものにするコスト関数です。200対60という非対称は、合理的な基準を用心の側へ傾けます。レベル制と巧妙さの値は、環境をあなたの感度に不利なほうへ傾けます。あなたは圧力のもとで最適化しているのです。レベル1では良かった基準の選び方が、分布の重なりが大きくなったレベル5では通用しないかもしれません。²

そしてそれこそが仕分けの要点です。あなたはただ読んでいるのではなく、現実のコストを伴う分類器を運転しているのです。ゲームは賢さに報いるのではありません。較正されていることに報いるのです。4つの結果は、その較正を可能にするフィードバックです。

統制された環境としてのエンジン

Hook Lineのルール層は純粋で決定論的です。ゲームが厳選した目録からシード付きの受信トレイを組み立て、1000/200/60/50の規則で判定を採点し、レベルに応じてラウンドの規模を増やし、上るにつれて巧妙さの下限を引き上げます。時計も、シード付き擬似乱数生成器を超える偶然性も持ちません。ですから同じシードと同じレベルは、いつでも同じ順序の受信トレイを生みます。時計はその外側にあります。1ラウンドの持ち時間は60秒で、タイマーが0になった時点で仕分けが済んでいないものは、信頼したものとして処理されます。結局、答え方には第3の道があるのです。何も言わないという道が。そしてそれが最も高くつきます。受信トレイに放置された詐欺は、1つにつき200を請求してくるからです。これは更新や広告のあるプラットフォームではありません。仕分けを練習するための統制された環境です。²

その統制こそが、4つの結果への対応を意味あるものにします。環境が再現可能だからこそ、同一の条件のもとで自分の基準が結果をどう動かすかが見えます。巧妙さが上がっていくからこそ、感度が目減りさせられる感覚が味わえます。罰則が非対称だからこそ、基準をどちらへ傾けるべきかが体で分かります。このエンジンは小細工ではありません。実験室です。

その実験室では、メッセージが信号、受信トレイがノイズ、そしてあなたの判断が分類器です。4つの結果は単なるラベルではなく、地図です。ヒット、見逃し、誤警報、正棄却。そのひとつひとつが、あなたの能力と構えについて何かを教えます。そしてそのひとつひとつが教えるのは、このゲームが正しいかどうかの勝負ではなく、正しいやり方で、正しいコストで正しくあることの勝負だということです。¹