北京SEO百度排名_网络推广_网站建设_专业网站优化【启点网络】

网站制作SEO优化推广10年,客户1200+

如何使用光年日志分析软件进行robots改写

文章分类: SEO方案资讯 文章来源: 北京启点网络 文章作者: 北京SEO顾问 时间: 2018-06-30 09:01:55浏览热度:


[导读]:

SEO要做的分析出了网站情况分析,还有一部分是做日志分析。下面我来讲讲如

 SEO要做的分析出了网站情况分析,还有一部分是做日志分析。下面我来讲讲如何通过光年日志分析软件来进行robots改写。各种登录,注册类的页面不仅要nofollow掉,robots也要屏蔽掉.许多活动类栏目会换成动态链接,在页面上使用nofollow并robots屏蔽掉,即杜绝了蜘蛛抓取,同时又不让其收录该页面.下面是光年日志分析出来的百度爬虫数据:
光年日志分析出来的百度爬虫数据光年日志分析出来的百度爬虫数据
因此可以看到那个文件夹访问的多,哪个少。下面是优孕行的robots改写细节:可以根据目录抓取的次数来写robots, 根据下图,robots禁止访问:User-agent: *Disallow: /admux/
Disallow: /hospitals.html
Disallow: /js/
Disallow: /admin/
Disallow: /plus/
Disallow: /weixin_api_test/
Disallow: /includes/
Disallow: /css/
Disallow: /editor/
Disallow: /manage/
Disallow: /system/
Disallow: /qiniu_ueditor/
Disallow: /simditor/Sitemap: http://www.uyunbaby.com/sitemap.xml这便是运营科学化通过日志分析来达到SEO优化的效果,把不必要的robots禁止掉,然后爬虫就可以效率飞快的抓我们希望它抓的页面了。
 
标题:如何使用光年日志分析软件进行robots改写
地址:http://www.seozoe.com/news/zx/1251.html _北京SEO
声明:非特殊说明,本文为本站原创(翻译)文章,转载请注明:本文转自:北京SEO启点网络_启点


请您留下您的小脚印:

服务支持

我们珍惜您每一次在线询盘,有问必答,用专业的态度,贴心的服务。

让您真正感受到我们的与众不同!

合作流程

合作流程

网站制作流程从提出需求到网站制作报价,再到网页制作,每一步都是规范和专业的。

常见问题

常见问题

提供什么是网站定制?你们的报价如何?等网站建设常见问题。

常见问题

售后保障

网站制作不难,难的是一如既往的热情服务及技术支持。我们知道:做网站就是做服务,就是做售后。