蜘蛛日志分析有什么用?SEO对网站对蜘蛛分析能发现哪些问题
我们先了解下蜘蛛日志,其实就是搜索引擎要爬行网站时,向服务器发送请求时产生的访问记录文件。这样的日志文件通常发现异常才会去看,但其实日志文件也很重要,可以帮助我们获取一些信息以及分析出网站存在的问题。
一、在日志中能看到哪些数据?
在文件中我们可以看到蜘蛛的IP地址、访问的时间、蜘蛛抓取的网页地址、http状态码、请求方式、字节数等,日志代码示例如下:
220.181.108.79– – [18/May/2020:10:30:32 +0800] “GET /soft/17.html HTTP/1.1” 200 6779 “-” “Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http:// www.baidu.com/search/spider.html)
二、蜘蛛日志分析返回状态码:
1、200:代表服务器返回页面成功;
2、404:代表页面无法访问;
3、301:代表页面301转向(重定向);
4、304:代表客户端已经执行了GET,但文件未变化;
5、500:代表服务器遇到错误,无法完成请求;
6、403:代表表示服务器拒绝请求。
三、蜘蛛日志分析有什么作用?
1、通过分析我们可以判断蜘蛛有没对站点进行抓取,有没成功,也可以判断网站是不是符合搜索引擎的抓取规范,如有抓取失败可以找出原因。
2、可以判断哪些页面蜘蛛的访问频率太高,影响了服务器的正常运行,我们可以做出调整,限制蜘蛛的访问频率来保证服务器速度的稳定。
3、通过蜘蛛日志分析文件,我们可以判断有多少权重蜘蛛,看到蜘蛛的访问路径,更好的优化站内结构,同时可以判断出恶意攻击的行为。
通过日志我们可以分析很多信息,比如从返回状态码判断网站是否有打开不畅问题,有没存在死链等错误;在日志中也可以发现用户对页面的访问次数、访问时间与路径,通过数据分析用户的行为习惯,所以日志分析在我们优化网站、管理网站中是不可缺少的。
版权声明
以上文章中所选用的图片及文字来源于网络以及用户投稿,版权归原作者所有,对此本站均没有商业用途,仅供学习与交流;本站不负任何责任! 由于未联系到知识产权人或未发现有关知识产权的登记,如有知识产权人并不愿意我们使用, 如果有侵权请立即联系QQ:823124280,我们立即下架或删除。
相关阅读
- 甚组词 解答甚组词有哪些与甚至的甚组词怎么组! 197人看过
- 如何快速辨别纯粮酒与勾兑酒的区别?华成酒业 83人看过
- 最有名的宋词-著名的宋词 200人看过
- 爱情的唐诗宋词短侍-唐诗宋词中有关于爱情的诗句有哪些 188人看过
- 学宋词意义-学习唐诗宋词,有什么意义? 175人看过
- 宋词主要分什么-宋词主要分为什么派和什么派 168人看过
- 宋词减字谱-阅读下面一首宋词,完成后面的题目。 减字... 176人看过
- 江城子密州出猎宋词-《江城子·密州出猎》 170人看过
- 诗经唐诗宋词元曲的特点-诗经,元曲,唐诗,宋词的排列顺序是什么 169人看过
- 在农村开一家酿酒作坊怎么样,需要多少钱? 294人看过
- 宋词三百首作者是谁-宋词三百首的作者是谁 198人看过
- 古代宋词是怎么流传下来的-唐诗宋词,古代的词流传下来很多,词也是配合曲来... 191人看过
- 拼组词_拼字组词 179人看过
- 此组词 解答此组词有哪些与此的笔顺怎么写! 190人看过
- 除了唐诗宋词以外还有什么-除了唐诗宋词,其他朝代(元明清五代…)有什么优秀的... 199人看过
- 唐诗过后是宋词 葛兆光-葛兆光的《唐诗过后是宋词》 162人看过
- 写王昭君的宋词-描写王昭君的诗词 195人看过
- 鸥组词_鸥字组词 195人看过
- 人生的宋词-关于人生的诗句 191人看过
- 缭组词_缭字组词 184人看过