您好,欢迎来到中国博客联盟!这里只收录优秀独立博客,纯手工审核机制!
点此可加入QQ群交流建站心得!中国博客联盟QQ交流群快速加群按钮  中国博客联盟QQ交流群快速加群按钮 / 登录 / 注册 / 找回密码
当前位置:中国博客联盟 » 站长资讯 » 建站技巧 » 文章详细

让你的WordPress博客对蜘蛛的行为历历在目

来源:若兮为尘 浏览:2551次 时间:2014-09-06

若兮为尘云:抓蜘蛛者得天下!

刚建立新站的朋友肯定对一个问题非常关注,那就是我的站点蜘蛛到底来过没?我放了那么多的外链到底有没有作用?蜘蛛一天在我的站点到底来了多少次?来我站点的蜘蛛有什么?看似一个个无厘头的问题,在新手看来是一个极其重要的问题,尤其是在自己放了很多外链,天天坚持原创更新,天天site,但站还没有被搜索引擎收录的时候。那种心急如焚的感觉,作为我这样一个过来人,可是历历在目。依稀还记得建立第一个站的时候天天site,那个心急如焚啊,现在回想起来,简直不可想象.

稍微老一点的站长都知道,可以在主机的后台查看后台log日志,在log日志里可以查看蜘蛛有没有来过(蜘蛛来过的话都会留下自己的脚印)。但是Log日志的格式比较奇葩,就像压缩过的jq什么的,一大堆奇葩的东西,页面很乱很乱,没有缩进,只能傻呵呵的ctrl+f,然后查看蜘蛛有没有来过。

让你的WordPress博客对蜘蛛的行为历历在目

如果你不是非常介意站点的插件问题的话,我这里就推荐一个插件了,当然有能力的站长可以直接挖去核心代码,然后变成代码的形式。这个插件可以在根目录生成一个robots_log.txt的文件,里面记录了蜘蛛的抓取记录,你直接访问http:www.example.com/robots_log.txt即可,比如我的就是(www.rccoder.net/robots_log.txt)。在这里你可以查看有哪些蜘蛛,什么时候来的,去过那些页面,排版也是非常整齐,便于广大站长的阅读(吐槽一下,360的蜘蛛一天拼命的抓取我的站,可就是不怎么收录)

忘了说插件叫什么名字了……插件叫wp-log-robots,可以直接在WordPress的后台安装(如果搭建在SAE什么的就需要上传插件了),启用插件之后不要心急,在第一次时只有来了蜘蛛这个文件才会生成,不然访问就是404了。当然,蜘蛛来你的站点的话你很快就可以看到蜘蛛的运动记录了~祝你使用开心~~~



推荐博客

  • MHun博客MHun博客

    梦魂在那云梦大泽之中。

    www.iasds.cn
  • 欧零博客欧零博客

    欧零博客(OUZERO.COM)是一个热爱IT技术,乐于分享网络资源的博客,主要分享:网站源码,模板插件,网络技术,经验教程,站长工具,软件下载,Emlog 等.专注于:前端美化,二次开发,响应式,自适应 等

    www.ouzero.com
  • 楠哥说楠哥说

    90后连续创业者林浩楠个人博客,与您聊聊创业中的那些事、分享经验和干货......

    mikelin.cn
  • Stext博客Stext博客

    致力于互联网资源的共享,包括程序源码、各种教程、软件、影视、音乐、电子书、新闻等。对于一些比较不错的有价值的文章,本博客也会适当转载分享。

    www.stext.cn
  • 陈双义博客陈双义博客

    陈双义博客,是一个关注新鲜科技、互联网资讯,记录生活点滴,分享学习资源的原创个人博客网站。

    www.chenshuangyi.com
×
图标按钮