今天发现nostrbook.com 收录 还挺多的,google 搜能出来一些内容。比nostrhttp 项目 多很多,nostrhttp 他也收录了,但是搜索不出来,估计是google 觉得他价值不高?
我在robots.txt 里加了sitemap.xml, 现在sitemap.xml内容几大爬虫都 爬走了。 是否展示,看他们的算法 和心情了
google展示了一些,我新写的都有。
Please Login to reply.
No replies yet.