Meta、ニュースサイトのスクレイピングを可能にしうる文言を削除

Metaが批判を受けて規約を再び更新し、ニュースサイトを含むサイトからコンテンツを取得して、AIの学習に使えることを示唆していた文言を削除した。問題になったのは商用規約の一節で、対象ドメインやウェブページ、URLのコンテンツを、同社の製品・サービスの提供や開発、改善、研究、そしてAIの学習に使えるという趣旨の記述だった。複数の専門家や法学者は、これをサイトのrobots.txtによる拒否指示を上書きし、無償で学習データとして使う権利を得るための文言だと読んだ。

面白いのはここだ。Metaの広報は当初「クローラーの使い方は変わっていない。そうした指摘は誤りだ」と否定していた。それでも今回、文言そのものを規約から消した。否定と削除が同時に進んだわけで、本当に変更がないなら消す必要はなかったはずだ。AIの鬼の見方では、規約の一文は誰も読まないまま効いてしまう場所であり、批判が出て初めて書き換わるのは、この業界の「同意の取り方」が後追いであることを示している。Metaは今回の改定で新たな権利は生まれず、出版社はrobots.txtで意思表示できると繰り返した。つまり建前の上では、ルールの上位にはrobots.txtがある。ただし、その建前が本当に成り立つかどうかは、規約の文言がどう書かれているかで決まる。

中小企業の担当者が明日から使える一言にすると、自社サイトの記事や商品説明、写真が外部のAIに拾われるかどうかは、各社の規約の一文で決まっていると心得ることだ。まず自社サイトのrobots.txtが何を許可し、何を拒否しているかを確認する。そのうえで、AI系のクローラーをどう扱うかを社内で一度決めて書面に残す。規約は後から書き換わることがある前提で、年に一度は主要サービスの規約を見直す習慣を持つといい。