Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; ClaudeBot/1.0; +claudebot@anthropic.com) claude 爬虫来了，希望下一次 claude AI更新的时候能更新 nostr社区里的内容。 nostr社区原创内容要加强阿。 内容的价值还不够，无用信息很多。
目前看 google的爬虫很温和， 间隔时间长。估计是要分析内容决定下一个爬什么。 claudebot 非常粗暴，只要是链接就干。他们遵守我的规则 爬虫间隔时间是3秒。基本是3-5秒爬一次。
Please Login to reply.
No replies yet.
