致力服务于网站品牌的开发和传播
                      提高网站建设水平,加大企业网络营销力度

                      电话咨询

                      PHONE CONSULTING

                      0394-8360202
                      15503949979

                      在线咨询

                      ONLINE CONSULTING
                      有问题?点我  
                       当前位置:首页 > 动态 > 技术知识
                      解读robots文件与优化的关系 文章来源:周口中原传媒有限公司     浏览次数:1641次     发布日期:2012.12.19     首先我们要明白什么是robots是什么?其实说白了robot文件和浏览者没有任何的关系,这个文件时放在网站程序的根目录的,是针对蜘蛛而做的一个文件,在这个文件里设置的有蜘蛛可以抓取的页面,可以访问的页面,不可以访问的页面,等等都是在这个文件里面设置的,比如说,Disallow: /目录名1/ 这就是不允许爬行蜘蛛不能访问目录名1文件夹面的所有文件,在这文件夹里面所有的文件都不会被百度蜘蛛抓取,同样的我们也可以设置多个这样的文件,比如说:Disallow: /目录名1/ ,Disallow: /目录名1/ ,Disallow: /目录名2/ ,Disallow: /目录名3/ 这里的设置就是说不允许蜘蛛抓取目录名1、目录名2、目录名3、等等,我们这里设置了不能抓取一个文件夹的内容,那么我们怎么设置不让他抓取一个网站的内容呢?那么我们可以设置百度蜘蛛不能访问,比如说:User-agent: Baiduspider,这里的设置就是说不允许百度蜘蛛抓取网站的所有内容,除了这样的设置以外我们换可以设置网站只能访问那个根目录,比如说:Allow:/目录名/运行访问“目录名”,以上就是robot与优化的关系 下一篇: 关于召开2013年周口中原传媒有限公司乒乓球比赛的通知上一篇: 公司业务新拓展,服务拓展至省外

                      版权所有:周口中原传媒有限公司 2005-2015 All Rights Reserved.    
                      咨询专线:15503949979 服务专线:0394-8360202 投诉热线:13939438668
                      地址:周口川汇区七一路与文明路交叉口向北300米路东 豫ICP备13020663号 豫周公网安备:41160002130010号

                      网站首页 | 关于我们 | 服务项目 | 经典案例 | 解决方案 | 新闻动态 | 公司资质 | 人才招聘 | 支付方式 | 联系我们

                      亚洲免费线上影片 2018 天堂网影音先锋| av淘宝 女优欧美| 2018岛国女优影院| av天堂影音先锋| 影音先锋天堂网av| 国产套图| av站| 色中色 在线| 男人天堂黄色网站| 天堂网最新av免费网站| 先锋影音男人天堂网| ktv222天堂网| av日本亚洲欧洲免费| 全部影音先锋电影| 欧美亚洲色情图| 欧美xoxo___se| 色情网合集| 限制级偷拍午夜| 花野真衣此链接| younv资源av成人资源| 影音先锋天堂站AV|