Botフラグを利用する話は繰り返し出るんだけど、ユーザーが自由に指定できるものなので、Botブロックとか特有の挙動が一般的になると、今度はBotにBotフラグをつけないとか、逆手にとってBotフラグつけるようにする人がでてきたりとか、いろいろ難しいのよね。