AIボットはrobots.txtに従うのか? Cloudflareが計測を始めた件と、自分のログの確認方法
CloudflareがVerified botsによるrobots.txtとHTTP 429の順守を評価する仕組みを発表。内容と、自分のログやrobots.txtの確認方法。
公開: 使えるツール: AI Bot Log Analyzer, AI Crawler robots.txt Generator
~/ / AI記事
AIに関わる話題を、公式の発表で確認できた事実だけでまとめた記事です。各記事に出典と確認日を付け、関連するこのサイトのツールをその場で使えるようにしています。
CloudflareがVerified botsによるrobots.txtとHTTP 429の順守を評価する仕組みを発表。内容と、自分のログやrobots.txtの確認方法。
公開: 使えるツール: AI Bot Log Analyzer, AI Crawler robots.txt Generator
GitGuardianが公開MCP設定ファイルで有効な認証情報2,117件を確認。レポートの内容、シークレットを置かない方法、確認ツール。
公開: 使えるツール: MCP Config Checker, Prompt Redactor
MCP仕様2026-07-28でプロトコルがステートレスになり、HTTP+SSEなどが非推奨に。変更点と、設定やツールスキーマの確認方法。
公開: 使えるツール: MCP Config Checker, JSON Schema Validator
AIの助けで研究者が見つけた、PHPの重大な脆弱性2件(2026年10月21日に修正)。AIの関わり方、修正済みバージョン、お使いのPHPの確認方法。
公開: