河南合之创信息技术有限公司——专业为企业提供非竞价推广、品质网站、微信/小程序开发、外贸推广的一站式网络营销服务
业务咨询:0371-56286567    售后服务:15346587126

如何对网站做日志分析?

日期:2018-01-31 17:23:13 阅读:84 标签:如何,对,网站,做,日志,分析,做,网站,日志,
做网站日志分析,可以帮助我们从客观数据出发去了解网站的情况,准确地定位搜索引擎蜘蛛爬行的页面以及时间长短,从而有针对性的对我们的网站进行调整。
一、查看状态码信息(附:网站制作过程中见到的http状态码是什么)
状态码分为两种,一种是蜘蛛状态码,另一种是用户状态码,通过蜘蛛状态码可以准确的查看到网站是否存在抓取问题。例如:404代表的是错误页,301、302代表的是重定向,还有一些:504、500、等状态码,值得说的是:除去200状态码,出现其他的状态码都是应当值得注意的,当然,如果只是个别几条则无需理会。但是如果数量一旦偏多,网站则100%出现问题了。
二、查看目录抓取概况
目录抓取,可以清晰的查看到光顾网站的蜘蛛爬行过哪些目录。要知道有些目录是没有价值的,如一些图标目录、下载目录、留言目录等,还有后台目录、数据库,如果任由蜘蛛爬行,也是一种安全隐患。另外一方面,搜索引擎对于不同的站点都有着抓取配额,无用目录,更不要占用这样的配额,以免减少有效配额的抓取量。
三、查看页面抓取概况
页面抓取可以准确的查看到蜘蛛爬行的每一个页面,这也是对于LOG日志分析上非常重要的一个环节。如:多重URL链接的抓取?垃圾页面的抓取?都是可以在其中展现出来的。甚至:某个页面抓取频率越高,通常代表这个页面更有价值。
如果你想优化的页面,抓取频率偏低,那么就要为其增加适当的曝光度,来达成你想要的结果。
四、如何分析应对?
1.如果想要更多有效的着陆页被蜘蛛更多的抓取,那么请进行结构内链的完善。
2.不希望蜘蛛抓取那些没有优化意义的页面上,那么robots.txt上来进行封闭。
3.“蜘蛛陷阱”无止尽的循环,浪费抓取配额,通过页面抓取,都可以直观看到。
4.曝光力度够了,蜘蛛一样不抓取,只能说页面价值太低,需要进一步优化。
5.我们希望每个页面的下载时间足够快,可以在有效的时间内抓取更多的页面。
6.不是所有的蜘蛛都是真的蜘蛛,要学会查看蜘蛛是否为“采集”和“模拟”。
7.分析每天的蜘蛛,可以查看上升或者下降的趋势。如果有明显的变化,网站很可能会出事。
8.降低或者封禁不会带来流量的蜘蛛,以减少服务器压力,对大型网站很重要。
网站日志分析也是中小企业网络建设方案的其中一项重要内容,也是我们必须掌握的一种基本的技能,可以对我们出现问题的网站进行简单的诊断,及时处理问题。

文章由郑州网站建设公司_郑州网络推广公司_郑州网站优化公司_河南筑巢运营中心-河南合之创信息技术有限公司/news/cjwt/61.html编辑整理,转载请注明出处。

返回列表

上一篇:为什么现在建网站不要用Flash

下一篇:没有了

您需要我们建站服务吗? 请与我们联系

或致电0371-56286567咨询
我们会根据您的需求为你制定详细的网站建设方案!