欢迎广大seo爱好者一起学习交流经验,一起学习SEO!
当前位置:浪旅seo > 网站seo优化 > 正文

凤巢网络分析IIS日志中的搜索引擎爬虫痕迹

  凤巢网络分析IIS日志中的搜索引擎爬虫痕迹凤巢网络分析IIS日志中的搜索引擎爬虫痕迹

  第一个步骤:打开IIS服务器。选择所要设置的网站属性。选择“启用日志记录”,勾选,选择“W3C扩展日志文件格式”。

  第二步骤:点击“W3C扩展日志文件格式”后面的“属性”按钮,常规选项里面,选择新日志计划为“每天”,当然也可以选择其他,选择好保存日志文件的目录。(注:日志文件最好跟你要设置的网站放在一个目录内,避免和其他网站日志混淆)。

  第三个步骤:选择高级选项。勾选底下的用户代理(cs(User-Agent))等选项,我一般都将最下面的三个选项勾选起来。这样,你才可以看到百度等爬虫的名称。

  第四个步骤:选择名为“主目录”的选项卡,勾选“记录访问”的复选框即可。这样你的IIS日志就开始正常记录了。

  如何分析网站IIS日志中的搜索引擎爬虫轨迹,这是很多新手SEOer放在心里的一个疑问。网站建设中心又来给您支招了!

  假如你要搜索百度的爬虫,那么就直接在保存记录的文本文档上搜索“Baiduspider”,我们节选以下一行来做详细的分析。

  这段IIS日志代码表示:在2011-02-2713!02!40这个时间,百度搜索引擎的蜘蛛(ip地址为61。135。168。39,后面的是关于Baiduspider+的相关问题)访问了服务器ip为222。73。86。227的网站,并且抓取了首页/index。html,该日志记录保存在W3SVC321文件夹。其中,两个地方值得说明?

  1。4Mediapartners-Google:抓取网页确定AdSense的内容。只有在你的网站上展示AdSense广告的情况下,Google才会使用此漫游器来抓取您的网站。

  1。5Adsbot-Google:抓取网页来衡量AdWords目标网页的质量。只有在你使用GoogleAdWords为你的网站做广告的情况下,Google才会使用此漫游器。seo诊断报告seo预算快照回档是指百度的快照被退

版权保护: 本文由 浪旅seo博客 原创,转载请保留链接: https://www.xiaojinseo.cn/seoyh/10105.html

seo入门教程-网站seo入门基础免费教程-网站seo优化赚钱技术分享-浪旅seo 博客主人LANGLV
浪旅seo致力于分享各种网站seo优化干货,专注于seo入门基础教程,让小白少走弯路,教你怎么利用seo常用工具去诊断网站以及用seo赚钱的方法,同时每天更新各种黑帽seo优化技术,欢迎广大seo爱好者一起学习交流经验,一起学习SEO。
  • 文章总数
  • 7959412访问次数
  • 建站天数
  • seo入门教程-网站seo入门基础免费教程-网站seo优化赚钱技术分享-浪旅seo
    seo入门教程-网站seo入门基础免费教程-网站seo优化赚钱技术分享-浪旅seo
    seo入门教程-网站seo入门基础免费教程-网站seo优化赚钱技术分享-浪旅seo