AIクローラー

【AI×セキュリティ】AIエージェントはサイトをどう探しに来るか|「ai-catalog.json や llms.txt は置くべき?」を解く AIセキュリティ

【AI×セキュリティ】AIエージェントはサイトをどう探しに来るか|「ai-catalog.json や llms.txt は置くべき?」を解く

アクセスログを眺めていたら、置いた覚えのない /.well-known/ai-catalog.json や /llms.txt へのアクセスが残っていた——最近、そんな経験をしたサイト運営者もいるのではないでしょうか。その同じログには、.e...
【AI×セキュリティ】AIクローラーとサイト運営|「robots.txt で断れば大丈夫?」を解く AIセキュリティ

【AI×セキュリティ】AIクローラーとサイト運営|「robots.txt で断れば大丈夫?」を解く

「うちの記事、AI の学習に勝手に使われているのでは?」「最近アクセスログに見慣れないボットが増えて、サーバが重い」——サイトを運営していると、こんな悩みが出てきます。調べてみると「robots.txt に書けば AI クローラーを断れる」...