通过分析网站日志Log文件我们可以看到用户和搜索引擎蜘蛛访问网站的行为数据，这些数据能让我们分析出用户和蜘蛛对网站的偏好以及网站的健康情况。在网站日志分析中，我们主要需要分析的是蜘蛛行为。

　　在蜘蛛爬取及收录过程中，搜索引擎会给特定权重网站分配相应的资源量。一个搜索引擎友好型的网站应该充分利用这些资源，让蜘蛛可以迅速、准确、**的爬取有价值、用户喜欢的内容，而不浪费资源在无用的、访问异常的内容上。

　　但由于网站日志中数据量过大，所以我们一般需要借助网站日志分析工具来查看。常用的日志分析工具有：光年日志分析工具、web log exploer。

　　在分析日志时，对于单日日志文件我们需要分析的内容有：访问次数、停留时间、抓取量、目录抓取统计、页面抓取统计、蜘蛛访问IP、HTTP状态码、蜘蛛活跃时段、蜘蛛爬取路径等;对于多日日志文件我们需要分析的内容有：蜘蛛访问次数趋势、停留时间趋势、整体抓取趋势、各目录抓取趋势、抓取时间段、蜘蛛活跃周期等。

　　下面我们来看看网站日志如何分析?

　　网站日志数据分析解读：

　　1、访问次数、停留时间、抓取量

　　从这三项数据中我们可以得知：平均每次抓取页面数、单页抓取停留时间和平均每次停留时间。

　　平均每次抓取页面数=总抓取量/访问次数

　　单页抓取停留=每次停留/每次抓取

　　平均每次停留时间=总停留时间/访问次数

　　从这些数据我们可以看出蜘蛛的活跃程度、亲和程度、抓取深度等，总访问次数、停留时间、抓取量越高、平均抓取页面、平均停留时间，表明网站越受搜索引擎喜欢。而单页抓取停留时间表明网站页面访问速度，时间越长，表明网站访问速度越慢，对搜索引擎抓取收录较不利，我们应尽量提高网页加载速度，减少单而立停留时间，让爬虫资源更多的去抓取收录。

　　另外，根据这些数据我们还可以统计出一段时间内，网站的整体趋势表现，如：蜘蛛访问次数趋势、停留时间趋势、抓取趋势。

　　2、目录抓取统计

　　通过日志分析我们可以看到网站哪些目录受蜘蛛喜欢、抓取目录深度、重要页面目录抓取状况、无效页面目录抓取状况等。通过对比目录下页面抓取及收录情况，我们可以发现更多问题。对于重要目录，我们需要通过内外调整增加权重及爬取;对于无效页面，在robots.txt中进行屏蔽。

　　另外，通过多日日志统计，我们可以看到站内外行为给目录带来的效果，优化是否合理，是否达到了预期效果。对于同一目录，以长期时间段来看，我们可以看到该目录下页面表现，根据行为推测表现的原因等。

　　3、页面抓取

　　在网站日志分析中，我们可以看到具体被蜘蛛爬取的页面。在这些页面中，我们可以分析出蜘蛛爬取了哪些需要被禁止爬取的页面、爬取了哪些无收录价值页面、爬取了哪些重复页面url等，为充分利用蜘蛛资源我们需要将这些地址在robots.txt中禁止爬取。

　　另外，我们还可以分析未收录页面原因，对于新文章，是因为没有被爬取到而未收录抑或爬取了但未放出。对于某些阅读意义不大的页面，可能我们需要它作为爬取通道，对于这些页面，我们是否应该做Noindex标签等。但从另一方面讲，蜘蛛会弱智到靠这些无意义的通道页爬取页面吗，蜘蛛不懂sitemap?【对此，笨鸟有疑惑，求分享经验】

　　4、蜘蛛访问IP

　　曾经有人提出过通过蜘蛛的ip段来判断网站的降权情况，笨鸟感觉这个意义不大，因为这个后知性太强了。而且降权更多应该从前三项数据来判断，用单单一个ip段来判断意义不大。IP分析的更多用途应该是判断是否存在采集蜘蛛、假蜘蛛、恶意点击蜘蛛等。

　　5、访问状态码

　　蜘蛛经常出现的状态码如301、404等，出现这些状态码要及时处理，以避免对网站造成坏的影响。

　　6、抓取时间段

　　通过分析对比多个单日蜘蛛小时爬取量，我们可以了解到特定蜘蛛对于本网站在特定时间的活跃时段。通过对比周数据，我们可以看到特定蜘蛛在一周中的活跃周期。了解这个，对于网站内容更新时间有一定指导意义，而之前所谓小三大四等均为不科学说法。

　　7、蜘蛛爬取路径

　　在网站日志中我们可以跟踪到特定IP的访问路径，如果我们跟踪特定蜘蛛的访问路径则能发现对于本网站结构下蜘蛛的爬取路径偏好。由此，我们可以适当的引导蜘蛛的爬取路径，让蜘蛛更多的爬取重要、有价值、新更新页面。其中爬取路径中我们双可以分析页面物理结构路径偏好以及url逻辑结构爬取偏好。通过这些，可以让我们从搜索引擎的视角去审视自己的网站。转载请注明：http://www.jnsino.com

资讯来源：http://www.jnsino.com  

时代乐购贴心服务让网购不再死气沉沉
现在网购人士的数量在激增，这是由于网络的大规模发展所引发的，很多人表示网购生活给他们带来了极大的方便，但是由于网购和现实中的购物活动有着很大的区别，网购也有一些特殊性，这些特殊性让消费者感觉有些无奈。而网购无法得到满意的服务往往是消费者最常反映的一个问题。业内人士表示，因为网络上的交易双方身处天南海北，所以往往在服务方面更不容易得到保证，但是也不是每一个经营网购的人都忽略了这个方面，时代乐购就把服...

南京幼儿园旧地坪翻新施工
南京幼儿园旧地坪翻新施工400-0709-910请拨打400-0709-910电话,手机纯属私人号，请勿联系。 刚喷涂完的涂层表面呈乳白色，像云一样的变白无光泽，怎么办？ 起因 喷涂场所的湿度过高。所使用稀释剂的品质不良，挥发太快。喷涂场所的气温寒冷，尤其是在被涂物的温度低于室温场合。喷漆室内空气流通不良，又缺乏加热设备。 预防 对涂装工场和喷涂室进行适当加热，升高涂装环境温度。 使用品质良好的稀释剂。使用挥发较慢的稀释剂。 ...

南京舞蹈房旧地坪翻新施工
南京舞蹈房旧地坪翻新施工400-0709-910请拨打400-0709-910电话,手机纯属私人号，请勿联系。 环氧地坪出现缩孔处理方法 1环氧地坪漆施工前，先检查环氧地坪漆材料质量，确认环氧寺平漆涂料是否配套，无误后方可施工。 2清理施工现场，保持施工现场干净整洁，施工工具及设备涂装前要清理干净后才可以施工。 3底层磨砂要平，环氧地坪漆需要对打磨进行充分，不能出现漏磨的地方，用细砂纸**均匀打磨一遍，并且把打磨产生的粉尘清理...

常州到攀枝花物流货运公司
发货**常州双安物流18861261682服务热线0519-88057158，**货运，专线直达，天天发车，安全快捷，诚实守信！！！常州双安物流公司是专业从事国内长、短途货物运输、公路快运、干线运输、货物仓储、采购、物流配送、货物分检及物流加工的服务型企业。公司备有敞车、高栏车、全封闭车、半封闭车、商品车专用运输车、集装箱车、冷藏车、高低板、大吨位半挂等各种吨位车型车辆，拥有厢式货车、敞车2.2米、4.2米、5.2米、8米、9.6米、...

美白高招让你瞬间白皙动人
美白高招教你轻松变白 拥有白皙皮肤的女性是很多男人心中的理想型，然而，美白说起来容易，实践起来总是充满心酸。你可能付出了八十分的努力，却未必得到一分的效果。身体美白保湿，找对方法才能有所收获。不想让努力付诸东流的亲们，一起来看看那些最受美白一族称道的美白秘诀吧。 美白不是一朝一夕就能达成， 一、柠檬片泡澡 身体美白保湿，柠檬是个不错的idea。柠檬是一个好东西，不但能够提神，还有美白的作用。在泡澡时，在水...