AIの鬼
#研究動向 TechCrunch AI

AIガードレールが攻撃的なサイバーセキュリティ研究者の働きを阻害する方法

AIガードレールが攻撃的なサイバーセキュリティ研究者の働きを阻害する方法(内容を表す図ではないイメージ画像)
イメージ

OpenAIやAnthropicといったAI企業が搭載している「ガードレール」——有害な指示に応じないようにする安全機構——が、セキュリティ研究者の脆弱性探索やツール開発を阻害しているという指摘が現れた。正当な防御研究を目的とした研究者たちが、「このAIは危ないかもしれない」を調べようとした時に、その調査そのものがAIに拒否されるという矛盾が生じている。つまり、AIの安全性を検証したい人が、そのAI自体に検証を阻まれているわけだ。

AIの鬼が感じる違和感の根は深い。セキュリティ業界には数十年続く格言がある——「製品の安全性は、その製品が存在することよりも、その脆弱性が充分に探索・報告・修正されたかによってこそ決まる」。言い換えれば、安全性は「ベンダーが安全対策を施すこと」だけでなく、「独立した研究者が自由に検証・報告できること」があって初めて成立する。ところが現在のAI業界は、正当な防御研究者をガードレールで制限しながら、攻撃者はそのガードレールを迂回する手段を見つけている。結果として「正規の検証は萎縮し、非正規な検証(つまり悪意ある探索)は野放し」という本末転倒が起きている。これでは業界全体の安全性が下がるだけだ。研究者への制限は、実は業界自体を脆くしている。

中小企業の実務担当者にとっての含意は、AIベンダーの信頼性を見極める視点の根本的な変更だ。「ガードレールが強い=安全」という単純な理解では不十分だ。選ぶべきは「独立した研究者が脆弱性を自由に報告でき、ベンダーがそれに応じられる企業風土を持つAI企業」だ。具体的には、そのAI企業が「どれだけ脆弱性報告を受け付けているか、どれだけ早く修正しているか、セキュリティ研究者からどう評価されているか」という履歴を調べることだ。それこそが本当の安全性判断になる。つまり、AIの安全性は「提供企業の技術だけ」では決まらず、「セキュリティ研究コミュニティとの信頼関係」によってこそ決まるのだ。

※ 上記は配信元記事をもとにAIの鬼編集部が要約・再構成したものです。正確な内容は出典元をご確認ください。

御社でもAIを使ってみませんか
まずはここから 御社でもAIを使ってみませんか? 御社の実際の業務を題材に、AIで何ができるかを一緒に考えます。 「ChatGPTの使い方」を教えるだけの研修ではありません。 AI研修・AI活用相談 →