報道によると、アマゾン ウェブ サービスは、Perplexity AI がルールに違反していないかどうかを判断するための調査を開始したという。
Amazonのサーバー上でホストされているこのクローラーは、ボットが特定のページにアクセスできるかどうかに関する指示を回避したと報告されています。
広報担当者は、クローラーはrobots.txtの指示に従う必要があると述べた。
特に、Amazon は「ロボット」ファイルを使用して Web サイトをクロールし、言語モデルのトレーニングに使用されるコンテンツを収集します。
コメント