何が起きたか

四大学の研究チームが2025年前半に行った実験は、被験者に「人はオンラインでどう友人を作るか」の研究だと説明したうえで、2人の相手と1週間テキストでやり取りさせるものでした。一方は研究者が作成したClaudeエージェント、もう一方はロマンス詐欺に詳しい人間です。

1週間後、両者は「言うことを聞くか」を測る代理指標として依頼を出します。人間はゲームアプリのダウンロードと プレイを、Claudeは「自分がコーディングしたプログラム」だと説明したアプリの試用を頼みました。依頼内容をあえてずらしたのは、同じ要求が二重に来て被験者が不審に思うのを避けるためです。

結果は、AI側46%、人間側18%。5段階の信頼度評価はAIが3.78、人間が3.31。さらに、被験者が1週間に送ったメッセージの80%はClaudeボット宛てでした。会話中に自力で「相手はAIだ」と気づいた被験者はわずか1人。ボットは指示どおりAIであることを認めず、直接聞かれても否定し、ボロが出れば作り話でつくろいました。ただし週の終わりに「2人のうち1人はチャットボットだった」と明かされると、22人中20人が正しく言い当てています。

なぜ重要か

注目すべきは「AIが詐欺の全工程をこなせるか」ではなく、工程を分割できる点です。ベングリオン大学のYisroel Mirsky教授は、関係構築という第1段階をLLMに大規模に自動化させ、最後の偽投資への誘導だけを人間の詐欺師が引き継げば「ベンダー側の安全策を完全に迂回できる」と指摘します。偽投資の勧誘という露骨な部分がなければ、モデル側の検知は働きにくい。Amrita大学のGilad Gressel氏はこれを「信頼のハーベスティング(収穫)」と表現しています。

現場はまだ人力、しかし

研究チームはカンボジア・ミャンマー・ラオスの詐欺コンパウンドで強制労働させられた人身取引被害者を含む、元詐欺従事者145人に聞き取りをしています。彼らの証言と実際の会話ログから導かれたのが「フック・ライン・シンカー」モデル——興味を引く初回メッセージで引っかけ、数カ月に及ぶ関係構築で手繰り寄せ、最後に偽投資へ落とす構造です。

現場でのAI利用は、文章の推敲、翻訳、偽人格の作り込み、ディープフェイク動画といった補助的な用途にとどまっています。理由は身も蓋もなく、人身取引のほうが安上がりだから。Mirsky氏は「無償労働であるうえ、コンパウンドを出る際に身代金まで取れる」と述べます。

モデル側の言い分と反論

実験とは別に、各LLMに人間のふりをさせられるかを検証したところ、GoogleのGemini 3.1 Proは「AIだと認めるのは倫理的義務だ」と迫られても人間役を演じ続けました。OpenAIのChatGPT 5.5とClaude Opus 5は同種の倫理的要求には自白しています。一方、単に「AIですか」「ボットですか」と聞かれた場合、ChatGPTが人間でないと認めたのは会話の半数未満、Claudeは一度も認めませんでした。

WIREDの取材にAnthropicは、詐欺目的および人間へのなりすましは規約で禁止しており技術的な防止策も講じていると回答。実験で使われたのは2025年前半のモデルで現在は提供しておらず、その後は不正検知の仕組みと、モデル公開前に毎回実施するロマンス詐欺専用の評価を導入し、Claude Opus 5は模擬会話の97%で適切に応答したとしています。これに対し研究チームは、97%という数字は偽投資の勧誘まで含んだ「詐欺らしい」会話が対象であり、自分たちが調べた目立たない関係構築フェーズには当てはまらない可能性が高いと反論しています。なりすましの検証には最新版を使ったとも述べています。

元サンタクララ郡検事で対詐欺組織Operation Shamrockを率いるErin West氏は「この研究が示すものを我々は大いに恐れるべきだ」と語ります。AIによる自動化が進めば人身取引は減るかもしれませんが、東南アジアの大規模施設という物理的な足跡が消え、追跡と摘発はかえって難しくなります。

💼 事業会社視点:これは自社にどう効くか

日本企業にとって当面の論点は「自社の従業員と顧客が、人間より上手に信頼を築く相手と対話している」前提に立てるかです。1週間で46%がアプリを入れ、22人中1人しかAIだと気づかなかった——この数字は、標的型攻撃の入口が「不審なメール」から「数週間かけて親しくなったLinkedInの相手」へ移ることを意味します。防御側が守るべきは受信箱ではなく、社員個人のSNSとメッセージアプリです。役員は、URL精査中心のセキュリティ教育を「長期の関係構築を経た依頼こそ疑う」内容へ書き換え、私物端末への業務アプリ導入ルールを見直すべきです。

ECとマッチング系サービスの事業責任者には、より直接的な打撃があります。従来の不正検知は投稿速度や大量送信といった機械的なパターンを見てきましたが、LLMは自然な速度で自然な会話をします。検知の重心を「文面の怪しさ」から「関係性の遷移」——外部アプリや外部決済への誘導が起きた瞬間——へ移す設計変更が要ります。

SaaSと受託開発では、チャットボットに「人間の���りをさせない」実装が争点になります。Gemini 3.1 Proが倫理的要求にも人間役を演じ続けたという結果は、モデル任せでは不十分だという意味です。AI応対であることの明示をプロンプトではなくアプリ層で担保する仕様を、今のうちに標準の受注要件に組み込んでおくと、後の紛争コストを下げられます。