How Companies Detect AI Cheating in Interviews

2月のこと。McSorley'sのべたつくボックス席で、ナチョスのケソがまだ指についていた。そこへ元同僚がスマホを取り出し、HackerRankの監督レポートを目の前に突き出してきた。その週に受けた本物の候補者の記録だ。ブラウザのタブを3秒離れただけでフラグが立った人がいる。3秒。貼り付けは一回ごとに、文章まるごと記録される。視線を外す回数が多ければ、Webカメラの画像には自動でタグがつく。Modeloを持ったまま、まずい、まずい、まずい、と固まった。私はその時点で2カ月、面接中にInterviewManを使っていた。料金は月12ドル。デスクトップのオーバーレイだ。その向こう側にある監視システムを、いま見せられている。笑うしかなかった。

彼はシリーズCのSaaS企業で人材採用を担当している。社名は教えてくれない。毎週のように不正を見つけていて、その週だけでも3人捕まえたという。いちばんひどい話は、聞いていて本当に気分が悪くなった。候補者が画面共有の前にオーバーレイを閉じ忘れたのだ。いや、順番に話そう。その人は行動面接を20分間ずっと圧倒していた。面接官はうなずきながら好意的なメモを取り、空気も完璧。ところがコーディングで画面を共有した瞬間、AIの文章がそこに出た。画面に出たまま、パネル全員から丸見えだった。10秒間、完全な沈黙。そのあと丁寧に別れを告げられた。たぶん助けなど要らない人だったのに、コーディングが不安で、閉じるのを忘れたんだろうと彼は言った。この話がずっと頭から離れない。私も面接で画面共有する。何でもない水曜日に、同じ目に遭っていたのは私かもしれない。その夜は眠れなかった。

InterviewManを使っている、と打ち明けた。彼はグラスを口に運ぶ途中で止まり、ブラウザ拡張か、単体アプリかと聞いた。単体のデスクトップアプリだと答えると、グラスを置いた。それから言われたことが、今も引っかかっている。あの監督機能は全部、ブラウザ内のJavaScriptで動く。見えるのはブラウザの中だけ。拡張機能、タブ、貼り付けの履歴、コードエディタ。ブラウザの境界で止まり、実際のパソコン上にある別アプリまでは確認できない。そこはきっぱりしていた。ブラウザ拡張は「ただで捕まえられる相手」だという。ページを読み込んだ時点で監督側が拡張機能の一覧を照会するため、最初の質問が来る前に終わる。では、ブラウザに一度も触れない単体のデスクトップアプリはどうか。彼の言葉をそのまま借りれば、「捕まえたことは一度もない」。そう口にしながら、ボトルのラベルを剥がしていた。本人も、その答えをあまり気に入っていないように見えた。

私がのぞいているコーディングブートキャンプのDiscordでも、同じ話を聞く。ある人はCluelyのステルスプランに月95ドル払っていた。ブラウザ拡張だ。監督付きのCodilityで、きっかり2分もしないうちに見つかった。別の人はSensei AIに月89ドル。これもブラウザ拡張で、HackerRankが45秒でフラグを立てた。今でも45秒という数字を考える。45秒だ。2人とも同じチャンネルで、ステルスモードなら守られるはずだったと怒っていた。何も守られなかった。95ドルを失い、その会社にはメールアドレスをブラックリストへ入れられた。

その週に彼が見つけた残り2人は、技術ではなく振る舞いでばれた。1人はどの回答の前にも7、8秒、黙り込む。簡単な質問でも難しい質問でも同じ。「現在の職務について教えてください」でも8秒。「分散システムで連鎖障害が起きる仕組みを説明してください」でも8秒。この話をしながら彼は笑っていた。自分がどこで働いているか思い出すのに8秒かかる人はいない。評価表には「外部入力」と書かれ、次へ進んだ。