Cloudflareに来る生成AIクローラーのすさまじさを知る

これまで、クローラといえばGooglebotくらいしか意識していなかった。

ところが、生成AIクローラーのすさまじいことと言ったら、驚く。

そうして、ガンガン弾いてはいるw

AI Crawl Control > 概要

駄文をクロールされるのは恥ずかしい限りなんだが😏

つうか、ログを見る限り、Wordpressは肥大化してしまいましたなあ…

幸い、Emdashはコード見ながら、コード編集しながら利用しているので、見通しがあってよい。

これも、あらかじめAstro本で勉強していたせいもあるけど。

AstroCloudflareEmdash

コメント