常州网络公司首页 >>> 网站优化

robots.txt写法

发布时间:2008-9-11 0:14:55   浏览次数:5029

# robots.txt file start
# Exclude Files From All Robots:
User-agent: *
Disallow: /chemmanage/
Disallow: /member/
# End robots.txt file
 

 

Disallow: /chemmanage/表示禁止抓取这个目录

上一条:关键词的选择与应用
下一条:中文搜索引擎提交大全
首页 | 在线留言 | 网站地图

CopyRight ©2008-2014   糊涂蛋技术网    苏ICP备05013073号
站长:万创   QQ:54960248  E-mail:xlxcn#126.com