(转载:www.idcew.com) 怎么看IIS日志确定蜘蛛是否爬过
如何查看搜索引擎(如百度或者谷歌)光临过你的网站。 为什么要租用香港服务器 首先需要服务器开通了IIS日志,
于是,今天决定将自己在这方面经验用文字的形式表达出来,希望对需要这方面知识的朋友有所帮助。言归正传,其实查看百度或者谷歌是否来过网站,方法都比较简单。
一、检测百度是否光临过你的网站
登陆FTP,下载服务器目录下边的logs文件,解压成 .log并且用写字板打开,搜索一下蜘蛛的英文单词robots,假如能搜索得到,就证明百度蜘蛛曾经来过。
二、检测谷歌是否光临过的你的网站
在Google网站管理员指南里有这么一个小工具,通过它你可以知道Google爬虫机器人索引你的网站的时间和上一次抓取过你的网站页面的时间。这里可能有人会说,我在google搜索栏里输入“site:www.***.com”不就可以知道自己的网站被google索引的时间了吗?其实不然。因为在google爬虫机器人索引一个网站之后,是需要一段时间进行编排和处理,并不会马上在google搜索引擎中实时看到索引结果。因此,这个时候这个小工具可以为你提供很大的方便,这个工具叫Site status(https://www.google.com/webmasters/tools/sitestatus)。
大家只要按照步骤,上面的两个方法,就能够让你查看到你的网站是否被蜘蛛抓取过
美国服务器租用找E网科技 (转载:www.idcew.com) |