確認画面の97%は「はい」だった — AIに1回だけ止められて、その1回も訊かれる場所が間違っていた
2026年8月14日から、Claude Code の「これを実行してもいいですか？」という確認画面が、既定で出なくなりました。代わりに、取り返しのつかない操作と環境の外に向かう操作を止める判定器が、道具の呼び出しを1つずつ通す方式になっています。 やめた理由として公表された数字が、これです。 確認された人のうち、97% が「はい」と答えていた。 この数字を見て、最初は「みんな読んでいないのか」と思いました。実際そうでもあります。ただ、同じ発表にもう1つ数字が並んでいて、そちらのほうが効きました。 危険なコマンドを、人は 13.6% しか止められなかった。判定器は 89%。 読んで...
出典: Zenn AI（配信元の紹介文より引用）
このニュースの全文は、配信元でお読みいただけます。 Zenn AIで元記事を読む →
編集部の実践記録から
情シスの仕事はAIでどこまで速くなるのか ― 181名のランダム化比較試験が示した「効く業務」と「25%遅くなる業務」
Microsoftが181名を対象に行ったランダム化比較試験で、情シス業務の正答精度は平均34.53%改善しました。ただし効いたのは自由記述型の作業で、多肢選択型は精度が有意に上がらず所要時間は25.13%増えています。発信元が製品提供者本人である点も含め、業務単位の線引きを整理します。
続きを読む →
安いから中国製モデル、は成立するのか？ 米国政府機関の実測でGPT-5-miniが平均35%安かった
米国商務省NIST傘下のCAISIがDeepSeekの各モデルを実測しました。同等性能に要した費用はGPT-5-miniが平均35%安く、エージェント乗っ取りではDeepSeek最良モデルでも認証情報の窃取が37%の試行で発生。トークン単価ではなく総額と乗っ取り耐性で選ぶべき理由を、評価の立場性と限界も含めて整理します。
続きを読む →
既知の脱獄攻撃を受けると、AIの安全性は39システム中35システムで落ちる？
MLCommonsが公開した脱獄ベンチマークv0.5では、公開・既知の攻撃を加えるとテキスト対テキストの安全性スコアが平均19.81%下がり、39システム中35システムが安全グレードを1段階以上落としました。通常利用の安全性と攻撃下の安全性は別物だという実測を、中小企業の受け入れテストの話に落とします。
続きを読む →