(2025-07-31追記) 6月28日よりAIクローラ除外がオプトインになったようです。つまり、設定をオンするとAIクローラを拒否するrobots.txtになるということで、デフォルトでAIクローラを除外しないようになっているようです。 staff.hatenablog.com (追記終)最…