看图。。。
下载该robots.txt文件
User-agent: * Disallow: / ...
bar.baidu.com/robots/robots.txt 2005-12-26 - 百度快照
百度大妈真幽默。。自己爬自己。。
文章末尾固定信息
我的微信
我的微信
微信扫一扫
- 本文由 LsevenTT站群哥 发表于 2013年3月23日 07:38:43
- 转载请务必保留本文链接：https://lseventt.net/archives/194.html
- 百度大姨妈
- robots.txt
评论