sinobuy
  

你好! 访客. 请先 登陆注册一个帐号.
十月 23, 2017, 01:55:16 pm
论文答辩趣闻 新年祝福短信 淘淘成长日记 可爱发行全攻略 鬼故事一箩筐 杨柳青石家大院 淘淘成长日记
* 首页 说明 搜索 日历 登陆 注册
公告和新闻:关注原生态购物网微信公众号就有赢取超值大礼的机会 点击进入
原生态论坛  |  设计专版  |  网页/程序设计 (版主: tianya)  |  主题: 网站抓取频次下降的原因及分析 0 会员 以及 1 访客 正在阅读本篇主题. « 上一篇主题 下一篇主题 »
页: [1] 向下 打印
作者 主题: 网站抓取频次下降的原因及分析  (阅读 59519 次)
水影凝月
Administrator(管理员)
级别:东方不败
*****

受欢迎度: 190
在线 在线

帖子: 20774


451314485
个人网站 电子邮件
网站抓取频次下降的原因及分析
« 于: 三月 07, 2017, 09:56:49 am »

        什么是抓取频次,即Baiduspider每天访问你的网站的次数,可以通过百度站长平台查看最新抓取频次数据。如果发现网站的抓取频次大幅度下降,该如何分析其原因?该如何恢复抓取频次?下面我就这两个问题,给予解答。
        网站抓取频次下降的原因分析一般步骤如下:
        1、 通过网站服务器监控工具,查看最近的可用率和响应时间。且尽快让相关人员给予排查,解决服务器问题后,然后重新抓取诊断中“报错”,再提高抓取频次。
        2、 查看站长平台信息提醒中是否有邮件提醒“Baiduspider 通过解析到IP,无法正常抓取网站”,如有提醒请参考上面步骤“1”进行排查。
        3、 通过日志分析,查看抓取总数、各个页面类型抓取量、抓取状态码等等。找出抓取异常的页面类型。
        4、 了解网站最近改版动态及Robots文件书写规则是否有误,是否有误屏蔽蜘蛛操作。
        5、 查看百度站长平台官方报道,确认百度内部是否做调整。如果百度有调整,则持续监控一段时间。
        6、 如上述均没有异常,可在百度站长平台进行问题反馈。
        以上是个人一些操作经验,步骤的先后顺序可按实际情况进行调整,一般影响抓取问题的有以下几点:服务器连接错误、url规范、重定向错误、robots封禁问题、DNS问题等等。
已记录


原生态特色礼品:沉香 紫檀 黄花梨
页: [1] 向上 打印 
原生态论坛  |  设计专版  |  网页/程序设计 (版主: tianya)  |  主题: 网站抓取频次下降的原因及分析 « 上一篇主题 下一篇主题 »
跳到:  

友情链接: 原生态购物网 原生态官方博客  佛珠网  搜狐社区 淑女情缘论坛 沉香
  原生态论坛© 2005~2017, www.sinobuy.cn 版权所有
Powered by SMF 1.1 RC1 Lewis Media.
Powered by MySQL  Powered by PHP  Valid XHTML 1.0!  Valid CSS!