AIクローラーを一括りにするな：学習・検索・ユーザーfetch・AIエージェントを分けて制御するAIO Bot Governance

ツイート

この記事の位置づけ 本稿は、AI時代のWebサイト運用における AIO Bot Governance を扱う。 ここでいうAIO Bot Governanceとは、単に robots.txt を書くことではない。 また、単に llms.txt や llms-full.txt を設置して、AIに読ませる文脈を整えることでもない。 本稿の主張は明確である。 本稿は「AI bot一覧」ではない...