ベンダーのデモで高精度だったAIが、自社に入れた途端に使い物にならない。これは相性の問題ではなく、AIの構造的な性質です。2026年7月16日公開の医療画像研究では、造影CTで学習した手法を非造影CTに当てただけで精度が33.26%まで落ちました。同じ臓器、同じ装置種別、違うのは撮影条件だけです。
何が測られたのか
Yizhou Fang・Pujin Cheng・Yixiang Liu・Xiaoying Tang・Longxi Zhou による論文「CRISP: Constrained Refinement via Iterative Squeezing Process for Robust Medical Image Segmentation under Domain Shift」です(出典:arXiv:2607.15231、2026年7月16日(arXiv:2607.15231v1)、https://arxiv.org/abs/2607.15231v1)。
テーマは医療画像のセグメンテーション、つまり画像のどこが心臓の左心室でどこが血管かをAIに塗り分けさせる仕事です。ここで問題になるのがドメインシフト、学習に使ったデータと実際に使う場面の条件がずれる状況です。
研究チームは3種類のずれ方を用意しました。
- 多施設シフト:M&Msデータセット、心臓MRI 694ボリューム、4ベンダー(Siemens/Philips/GE/Canon)の装置差
- モダリティシフト:肺血管CT、造影あり93ボリュームで学習し、造影なし101ボリュームに適用
- 人口構成シフト:著者らの自社内データセット、通常98例で学習しCOVID-19患者74例に適用(倫理審査済み)
装置メーカーが違う、撮影条件が違う、患者層が違う。中小企業の言葉に置き換えれば、帳票のフォーマットが違う、現場の照明が違う、顧客層が違う、です。
精度がどこまで落ち、どこまで戻ったか
最も崩れたのはモダリティシフトでした。造影ありのCTで学習したベースライン手法を造影なしのCTに当てると、Dice(塗り分けの一致度を測る精度指標)は33.26%まで低下します。CRISPを適用すると59.46%(+26.20ポイント)まで回復しました。
| 条件 | 指標 | 変化 |
|---|---|---|
| 非造影CT 101ボリューム(モダリティシフト) | Dice | 33.26% → 59.46%(+26.20ポイント) |
| 非造影CT 101ボリューム(モダリティシフト) | HD95(境界誤差) | 29.97px → 13.19px(競合最強手法より8.39px良い) |
| COVID-19患者74例(人口構成シフト) | Dice | 70.61%(+5.46ポイント) |
| M&Ms 心臓MRI 694ボリューム、4ベンダー | 最良だった組合せ数 | Dice 77/99セル、HD95 55/99セル |
| M&Ms ターゲットドメインC | 部位別Dice | LV +5.60%、MYO +5.28%、RV +6.16% |
ここで注目すべきは改善幅の偏りです。崩壊していたモダリティシフトでは+26.20ポイント動きましたが、装置メーカー差だけのM&Msでは元の精度が飽和しており、改善幅は最小でHD95 0.14px(7.0%)にとどまります。効くのは壊れている場面であって、そこそこ動いている場面ではない、と論文自身が示しています。
平均点ではなく「全滅した割合」を見る
この論文でいちばん実務に効くのは、精度の出し方です。研究チームは平均Diceだけでなく、最悪ケースの分布を出しています。
- Dice 0.30未満、つまりほぼ全滅した症例の割合:36.4% → 0%
- Dice 0.50未満、つまり失敗とみなせる症例の割合:97.4% → 6.5%
(いずれも最悪ケース分析。対象症例数の内訳は論文に記載されていません)
平均が上がったという話ではなく、全く使えない事例を消したという主張です。これはAI導入のPoC評価にそのまま転用できます。ベンダーから「正答率◯%」という単一の数字が出てきたとき、追加で聞くべきはこの2つです。
- 最悪どこまで外したか
- 全く使えなかったケースが全体の何%出たか
平均正答率90%のAIでも、残り10%が業務停止級の誤りなら現場は回りません。逆に、外し方が一定の範囲に収まるなら人間のチェックで吸収できます。評価軸の選び方についてはAI導入で自社の評価基準をどう作るかも合わせて読んでください。
精度改善はタダではない
CRISPは推論時に反復的な補正を行う手法で、1ステップにつき約2回の順伝播を、おおむね3ステップ繰り返します。結果として推論コストは約6倍になります(著者らの設定、TITAN RTX 1枚・24GBでの実験)。学習条件は60,000イテレーション、学習率0.001(Adam)、GPU 1枚(TITAN RTX 24GB)です。ただし学習の実時間やGPUメモリ消費の具体値は論文に記載がありません。
約6倍という数字は、精度改善が運用費として跳ね返るという当たり前の事実を数字で語れる材料になります。クラウドAPIを従量課金で使う場合、精度を上げる工夫がそのまま月額を押し上げます。AIのコスト構造をどう見るかで触れた通り、精度と単価はセットで稟議に載せるべき項目です。
なお、どの工夫がどれだけ効いたかのアブレーション(部品を外して寄与を測る実験、Table 3)も出ています。
| 追加した要素 | M&Ms | 非造影CT | COVID |
|---|---|---|---|
| RSE単体の寄与 | +4.40 Dice | +18.19 Dice | 記載なし |
| Uncertainty Squeezing Loss 追加分 | +0.58 Dice | +8.01 Dice | +3.19 Dice |
ここでも、崩壊しているデータセットほど寄与が大きいという同じ傾向が出ています。
論文が認めている限界
誠実に扱うため、不都合な点を並べます。
- 独立した「Limitations」節が論文に存在しない。制約は本文中に散在しているだけです
- 3Dボリュームではなく2Dスライス単位の実装。MedSAM系ベースラインとの公平比較のためと説明されていますが、3D情報を活用していません
- 摂動にガウスノイズを用いており、著者自身が「現実世界のあらゆるシフトを再現するものではない」と明記しています
- 評価対象が心臓MRIと肺血管CTのみ。他の部位・他モダリティへの一般化は未検証です
- M&Ms(多施設シフト)では改善幅が最小(HD95 0.14px、7.0%)にとどまります
- 推論コストが約6倍に増えます
- 学習の実時間やGPUメモリ消費の具体値の記載がありません
- COVIDデータは著者らの自社内データセットで、第三者による再現が難しい状態です
つまりこれは「あらゆる環境変化に耐えるAI」ではありません。限定された条件下で、崩壊ケースを救った、という報告です。
中小企業にとって何を意味するか
医療画像専用の手法なので、直接の応用は弱いと考えてください。しかし示唆は強い内容です。
第一に、AIは導入先の環境が変わると平気で壊れる。同じ心臓、同じCT、造影の有無が違うだけで33.26%です。自社で起きるのは、ベンダーのデモ環境や他社事例では高精度だったAIが、自社の帳票フォーマット・現場の照明・自社の顧客層に持ち込んだ途端に使い物にならなくなる、という現象です。原因はAIの出来の悪さではなく、学習した条件と実際の条件がずれていることです。
第二に、PoCは必ず自社の実データでやる。ベンダー提供のサンプルデータで99%出ても、それは学習環境と同じ条件での数字である可能性があります。自社の実際の書類、実際の写り方、実際の顧客の書き方でテストして初めて、ずれの大きさが見えます。
第三に、評価は最悪ケースで見る。平均ではなく「全滅した割合」。36.4%→0%という数字の出し方は、そのまま自社のPoC報告書のフォーマットに使えます。
第四に、精度を上げる打ち手には運用費がついてくる。約6倍という数字は、精度改善を無料と考えないための具体例です。
なお、ここに書いた運用への落とし込みはTOEでは未実施です。TOEでは自社のドメインシフト検証を実施しておらず、論文の数字を自社環境で再現したわけではありません。そのうえで読み筋を書きます。中小企業がやるべきなのは、CRISPのような高度な補正手法の導入ではなく、もっと手前の「ずれの棚卸し」だと考えています。導入前に、学習・設定に使ったデータと本番で流れてくるデータの違いを列挙する。用紙のサイズ、スキャナの機種、記入者の癖、季節変動、新しい取引先の様式。この一覧を作るだけで、崩壊しそうな箇所の見当がつきます。
そのうえで、契約の書き方を変える。「精度◯%を保証」ではなく「自社の実データN件で、Dice相当の指標が閾値を下回る事例を何%以内に抑える」という形にする。これは技術の話ではなく購買の話であり、中小企業でも今日から実行できます。
まとめ
- 造影CTで学習した手法を非造影CTに適用すると、Diceが33.26%まで低下した(肺血管CT、造影あり93ボリューム→造影なし101ボリューム)。環境のずれでAIは壊れる
- CRISPは同条件で59.46%(+26.20ポイント)まで回復させ、境界誤差HD95は29.97px→13.19pxに改善した
- 評価の要点は平均ではなく最悪ケース。Dice 0.30未満の症例が36.4%→0%、0.50未満が97.4%→6.5%(最悪ケース分析、症例数の内訳は記載なし)
- 効果が大きいのは崩壊しているケースに限られる。装置メーカー差だけのM&Msでは改善幅は最小でHD95 0.14px(7.0%)
- 精度改善は無料ではなく、推論コストは約6倍。論文には独立したLimitations節がなく、2Dスライス実装・心臓MRIと肺血管CTのみの評価・自社内COVIDデータという制約もある。TOEでは未実施のため、まずは自社データと本番データの「ずれの棚卸し」から始めることを勧める