- シンガポールでは詐欺が報告犯罪の半数超、2019年以降の損失はS$40億超
- 軽量Gemmaを地域の詐欺会話で微調整し、端末上で動く検出モデルを構築
- 2段階構成で消費電力を抑制。学習に市民の私的データは使わない設計
何が発表されたのか
Google DeepMindとシンガポール政府技術庁(GovTech)は、市民を詐欺から守るためのオンデバイス詐欺検出モデルを発表しました。両者はシンガポール政府との「National AI Partnership」の一環として協力してきたと説明しています。発表の場は2026年のSingapore International Cyber Week(SICW 2026)です。
背景には詐欺手口の変化があります。原文によれば、単純なフィッシングから、説得力のある会話で被害者を誘導する複雑なソーシャルエンジニアリングへと移行しており、こうした手口が損失全体の最大80%を占めるとされています。シンガポールでは詐欺が報告された犯罪の半数以上を占め、2019年以降の損失額は40億シンガポールドルを超えています。
汎用のモデルは地域特有の騙しの手口が苦手で、検出が難しくなりやすいと指摘されています。そこでローカルの詐欺会話に合わせた調整が行われました。
端末内で解析する仕組み
このモデルはGoogle DeepMindの軽量モデル「Gemma」を、シンガポール固有の詐欺会話で微調整したものです。公的機関・銀行・地元の著名人になりすました会話や、その地域で流行している手口が学習に含まれており、無害な雑談と本当の誘導を見分けられるようにしていると説明されています。
従来の脅威検知はクラウド上でのサーバー側スキャンが中心でしたが、多くのメッセージングサービスはエンドツーエンド暗号化を採用しており、会話の中身を検査できません。そこで会話データを端末上で処理し、操作的な意図を検知したらその場で警告を出し、金銭や認証情報を渡す前に行動できるようにする方式を採りました。
端末で複雑な分類モデルを動かすには電池消費が課題になるため、2段階のパイプラインを組んでいます。第1段階では軽量な分類器が最小限の電力で受信メッセージを選別し、第2段階で微調整済みGemmaが会話のより広い範囲を評価して、脅威の確定か誤検知の切り捨てを行う構成です。
プライバシーと統治の設計
開発では厳格なガバナンスが保たれたと説明されています。微調整はGovTechが管理・運用するGoogle Cloud(GCP)環境内で行われ、学習データは隔離されていました。これは「Sovereign Sandbox」と呼ばれています。
学習データには私的な情報や個人識別情報を一切含めず、詐欺の報告やインテリジェンスから作られた匿名化データセットのみを使ったとされています。また、合成対話や地域のコーパスを用いたストレステストを実施し、多様な詐欺カテゴリと変化するなりすまし手口をカバーしたとのことです。
位置づけと残る論点
この取り組みは、暗号化された通信を守りながら利用者保護を両立させるモデルケースだと位置づけられています。原文は、メッセージングプラットフォームやOSベンダーがこうした軽量モデルを直接統合し、ユーザーを端末側で守れると述べています。
一方、原文には提供時期や価格、シンガポール以外での展開予定は示されていません。検出精度の具体的な指標や誤検知率の数値も公表されていません。実運用での効果は、今後の導入状況や評価結果を待つ必要がありそうです。
| 項目 | 第1段階 | 第2段階 |
|---|---|---|
| 役割 | 受信メッセージを選別し脅威候補を検知 | 会話の広い範囲を評価し脅威を確定、誤検知を除外 |
| 使用モデル | 軽量で効率的な分類器 | 微調整済みGemmaモデル |
| 電力・範囲 | 最小限の電力で受信メッセージを処理 | 会話のより広いスナップショットを対象(消費電力の記載は原文になし) |
Fighting scams shouldn't mean sacrificing personal privacy. Working with Google DeepMind, we're bringing advanced AI protection directly onto citizens' devices.
詐欺対策は、個人のプライバシーを犠牲にすることを意味すべきではありません。Google DeepMindと協力し、私たちは高度なAIによる保護を市民の端末に直接届けています。
今後の見通し
今後は、メッセージングプラットフォームやOSベンダーがこの軽量モデルを実際に統合するかどうかが焦点になるとみられます。原文は統合の可能性に触れていますが、具体的な提携先や提供時期は示していません。検出精度や誤検知率、端末の電池への影響といった実測値が公開されれば、実用性を判断できる材料になります。また、シンガポール以外の国や地域向けに同様のモデルが展開されるか、各国政府との連携が広がるかも注目点です。日本での提供については現時点で言及がありません。
日本の開発者・IT企業にとっての意味
日本のIT企業にとって、この発表は「オンデバイスAI」と「プライバシー対応」を同時に考える材料になります。日本でも特殊詐欺やフィッシングの被害は社会問題で、通信事業者やメッセージングアプリ、金融機関は対策を求められています。しかし会話内容をクラウドで検査する方式は、エンドツーエンド暗号化や個人情報保護の観点から取りにくくなっています。端末内で推論を完結させる設計は、この制約を回避する現実的な選択肢になり得ます。軽量モデルを実機で動かす2段階パイプラインや、電池消費を抑える工夫は、モバイル向けAI機能を自社サービスに組み込む際の参考になるはずです。一方で、地域ごとの手口に合わせた微調整と、学習データの統治体制をどう整えるかが実務上のハードルになるとみられます。
気になる点
- この詐欺検出モデルは日本でも使えますか?
- 原文には日本での利用や展開についての言及はなく、現時点で公表されていません。モデルはシンガポールの一般的なスマートフォンで動くよう最適化され、シンガポール固有の詐欺会話で微調整されています。他地域で使うには、その地域の手口に合わせたデータでの調整が必要になるとみられます。
- 会話データは外部に送信されるのですか?
- 会話データは端末上で処理されると説明されています。学習段階でも私的情報や個人識別情報は排除され、匿名化データセットのみが使われ、GovTech管理のGCP環境内で微調整が行われたとされています。ただし、検出結果が運用時に外部へ共有されるかなど、詳細は原文では明確にされていません。
- 誤って警告が出た場合はどうなりますか?
- 2段階構成の第2段階で、微調整済みGemmaモデルが会話のより広い範囲を評価し、脅威を確定するか誤検知として切り捨てる設計になっています。これにより不要な警告を減らす狙いがあるとみられますが、実際の誤検知率の数値は原文に記載がありません。
用語解説
- オンデバイスAI
- スマートフォンなどの端末上でAIモデルを動かす方式。データを外部サーバーに送らずに推論できるため、プライバシー保護や応答速度の面で有利とされる。
- Gemma
- Google DeepMindが公開している軽量なモデル群。原文ではこれを地域の詐欺会話で微調整し、検出に用いたと説明されている。
- エンドツーエンド暗号化
- 送信者と受信者の端末間で通信内容を暗号化する方式。中継するサーバー側でも内容を読めないため、サーバー側でのメッセージ検査が難しい。
- ファインチューニング
- 学習済みのモデルに追加データを学習させ、特定の用途や地域に合わせて挙動を調整する手法。
- ソーシャルエンジニアリング
- 技術的な攻撃ではなく、会話や心理的な働きかけによって人を騙し、情報や金銭を引き出そうとする手口。
出典
Google DeepMind and Singapore Government announce new AI tool to protect citizens against scams
https://deepmind.google/blog/on-device-ai-scam-detection-mddi
AI導入も顧問も、お任せください
何から手をつけるか、どこまでAIに任せるか。自社の業務に合わせて整理し、導入から運用まで伴走します。相談だけでも構いません。
AI導入について相談する