360 搜索爬虫

360综合搜索的360搜索蜘蛛——360Spider出现了。

如果希望自己的网站被360综合搜索收录,只要在robots.txt 文件中添加下面的代码:

User-Agent:360Spider

Allow:/

 

或者写成:

User-Agent: *

0 Comments

Leave a Reply

Your email address will not be published.