悪質ボット規制法がオープンウェブを壊す
原題: Breaking the open web won't stop the bad bots
なぜ重要か
AI学習用スクレイピング規制の動向は、ウェブのオープン性と知的財産の両立点を決める立法先例となり得る。
米連邦議会では「Stealth Bot Prohibition Act」が審議中で、300人超のメディア関係者が支持を訴えた。同法はウェブを自動巡回するすべてのボットに身元と目的の開示を義務付ける。しかし批判者は、AIによる大規模スクレイピングという本来の問題を直接解決せず、調査報道・研究・アーカイブ活動など公益的な用途を損なうと指摘する。
大手メディア300社超の代表者が先月末、米連邦議会に集まり「Stealth Bot Prohibition Act」への支持を訴えた。背景にあるのは、AI開発企業による大量のウェブクロールだ。膨大なコンテンツが無断で収集され、生成AI機能やチャットボットの学習に使われることで、メディアサイトの参照トラフィックと広告収入が奪われているという訴えは正当性を持つ。
しかし法案の中身を見ると、問題の核心には触れていない。連邦法案と、ニューヨーク州の「Stealth Crawler Prohibition Act」はともに、ウェブサイトへの自動アクセスを行うすべてのソフトウェアを「ボット」と定義し、身元と「具体的な目的」を開示しなければ「ステルスボット」と見なす。
連邦法案では、身元を秘匿したボットがウェブサイトの「技術的・商業的運営を損なう可能性が合理的に認められる」場合、FTCが最大5万3000ドルの制裁金を科せる。だが「合理的に損なう可能性」の定義は法案に示されていない。ニューヨーク州法案では、出版社が被害を立証せずともクローラーの身元開示を求める召喚状を取得できる。
問題は、身元開示が有害かどうかとほぼ無関係な点だ。身元を名乗った企業が1分間に1万回アクセスしても同法に準拠する一方、テック企業の反競争的行為を匿名で調査しているジャーナリストは違反になり得る。
調査報道における自動データ収集の価値は具体的な実績が示している。2022年にPulitzer賞を受賞したウォール・ストリート・ジャーナルの報道では、1万2000人の連邦政府高官による3万1000件超の財務開示書類を分析し、約4分の1が規制対象業界の株を取引していた事実を暴いた。このスケールの調査はウェブスクレイピングなしには不可能だった。
匿名性が必要なのは報道だけではない。Internet Archiveなどのウェブ保存機関、学術研究者、セキュリティ研究者も匿名クローリングに依存している。観察対象が監視されていると知れば収集できる情報の性質が変わるため、匿名性は調査の前提条件となる。
執筆者のLila BaileyとTess Vartanianは、AI企業による過剰スクレイピングは本物の問題だと認めつつ、解決策は有害な行動そのもの——例えばサーバー負荷や無断複製——を直接標的にすべきだと主張する。身元開示義務は悪質な大手AI企業より、むしろ資源の乏しい研究者や記者への打撃が大きい。