当前位置:首页 > 网站入侵 > 正文内容

什么是网站日志?什么样的场景下需要网站日志分析

访客2年前 (2022-04-14)网站入侵581

什么是网站日志什么是网站日志

网站日志对于网站建设的作用相当于监控摄像头对我们的房间,它可以记录下来,这一段时间里面所有的访客到我们家来访问的这个记录。

那我们一个网站每天有很多的用户来访问,同时每天还有很多的搜索引擎的蜘蛛来抓取日志,网站日志就能够把所有访客访问的情况,它用什么浏览器,什么操作系统,什么时间点来访问,访问了哪些页面?日志能够把这些数据全部记录下来。

同时呢搜索引擎的蜘蛛过来抓取,它是百度的搜索引擎的蜘蛛,还是google的还是360的?他们过来抓取,分别是什么时间点抓取的哪些页面,抓取的时候返回值是什么?是正常打开还是打不开,所有这些数据都能够记录到一个叫做日志的一个文件里。网站日志怎么分析1.网站日志下载及数据解读

分析网站日志,我们可以了解搜索引擎蜘蛛来到我们网站访问的时候,它获取到的信息是什么?网站跟搜索引擎之间它是什么样的一个对话,那网站日志怎么进行分析,从哪里下载到这个数据?

通过FTP访问网站的根目录。可以看到一个包含log的文件夹,这是存放日志的地方。

如何查看网站日志

下载、解压、打开日志文件,日志文件内容如:

61.135.168.22 – – [11/Jan/2009:04:02:45 +0800] “GET /bbs/thread-7303-1-1.html HTTP/1.1” 200 8450 “-” “Baiduspider+(+http://www.baidu.com/search/spider.htm)” (注:百度,这部分为本文添加)

203.208.60.43 – – [11/Jan/2009:04:02:43 +0800] “GET /sns/space-13563-do-friend-view-me.html HTTP/1.1” 200 5162 “-” “Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)” (注:Google)

202.160.178.21 – – [11/Jan/2009:04:02:44 +0800] “GET /sns/space.php?uid=323 HTTP/1.0” 200 7535 “-” “Mozilla/5.0 (compatible; Yahoo! Slurp China; http://misc.yahoo.com.cn/help.html)” (注:雅虎)

65.55.220.217 – – [11/Jan/2009:04:02:57 +0800] “GET /ucenter/avatar.php?uid=12373&size= *** all&type=virtual HTTP/1.1” 301 – “-” “msnbot-media/1.1 (+http://search.msn.com/msnbot.htm)” (注:MSN)

65.55.109.46 – – [11/Jan/2009:04:02:57 +0800] “GET /sns/source/script_menu.js HTTP/1.0” 200 7219 “http:/sns/space-5755-do-blog-view-me.html” “Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.2; SV1; .NET CLR 1.1.4322)

大概就是上面这样密密麻麻的代码,但是这些代码怎么理解呢。比较好理解,我们看一下这一串日志的内容。前面这个ip代表今天来访问我们的网站,它是什么ip?是用户呢还是搜索引擎蜘蛛它都有一个ip,就是把他的ip记录下来。后面这个是一个时间点,什么时间来访问我们的网站?然后呢get就是抓取,抓取的哪一个文件呢?抓取了这个文件。

就是我们的域名下面的www.xxx.com/BBS什么什么,把这个文件抓取回去。抓取回去之后呢200,这是http状态码,它代表抓取成功,然后后面这个数字代表抓取了多少个字节?那200,然后这个8000多就是代表成功抓取了8000多个字节,也就是我们一个网页的大概的大小。那后面这一段就是代表蜘蛛,Baidu Spider就代表百度的蜘蛛,那这一句就代表这个内容是百度蜘蛛过来抓取,成功抓取了这么多个字节。

好,那我们再看这个上面就可以看出这个是谁的蜘蛛,yahuspider这是雅虎的它是这个时间点。然后这上面是谁的呢?google的,对吧?最下面看一下,里面没有看到这是哪一个具体的搜索引擎。那它是谁?你看这个有MSIE6.0。这就说明微软的ie6.0,这是一个用户在来抓取和访问的一个页面。

所以日志它就这样的一个文件,把每天每时每刻用户和蜘蛛来抓取我们网站的所有的情况,把它记录下来。

2.分析网站日志工具是什么?

这个日志文件,里面看起来密密麻麻的,非常的费劲。一般人是没法看明白的。而且如果我们的网站的访问量非常大的话,那这个日志往往会有几十兆几百兆甚至几个G的这个大小。那我们在电脑上打开的时候,有的时候电脑都会卡死掉。那么就会用到网站日志分析工具。

一般分析网站日志我们用光年日志工具分析.关于这个工具的使用,大家可以看一下这篇https://jingyan.baidu.com/article/15622f240a2e6afdfcbea58a.html百度经验了解一下,也可以去搜外的网站上看一下有免费的教程。

3.网站日志分析http状态码的解读

那刚才我们看这个日志的时候,看到里面有一些刚才提到一个词叫做http状态码,有看到200或者404,这个叫做HTTP状态码。

那这个http状态码,就是代表搜索引擎蜘蛛或者用户来访问我们网站的时候,它是什么样的一个状态?什么样的一个情况?200就代表成功抓取了,如果是404就代表过来抓取这个链接, 但是这个链接不存在,所以它就返回404。那状态码一般有200或者404,或者500等等这样的几个常见的数字,

我们不用了解特别多,只要大概的知道这么几个数字代表什么?200代表成功抓取,404代表错误链接,500代表服务器出问题了,大概了解这么几个数据就可以了,不需要把所有的都记住。那如果想要了解更多http状态码的这个知识的话,可以在百度上搜索一下,就可以查询到所有这些代码分别代表什么意思?什么样的场景下需要网站日志分析那么对于一个职业网站优化人员日志分析的能力是必须要掌握的。那什么样的场景下需要日志分析%2c下面我们看一下.

1.比如说我们创建了一个网站,提交给搜索引擎,后来很长时间没看到搜索引擎的收录,那这个时候我们就需要下载日志来分析一下,看搜索引擎到底有没有过来抓取。

2.我们网站原来可能排名很好, 后来突然间发现异常了,那我们就需要把日志下载下来看一下搜索引擎这段时间过来抓取我们网站的时候, 它是不是有一些异常情况。

3.网站如果被人攻击或者入侵,那也要下载一下网站日志来分析我们这个问题出在什么时间点,什么地方?

做网站日志分析,我们采用的一个 *** 一般是对比法, 就是我们网站和排名都正常的情况的日志, 和现在出问题的时候的日志,拿出来进行对比, 采用光年日志分析,把这个数据拿出来看一下,看问题出在哪一个目录,或者说哪一些页面, 然后再去针对性的去研究一下。

扫描二维码推送至手机访问。

版权声明:本文由黑客技术发布,如需转载请注明出处。

本文链接:http://www.w-123.com/43517.html

标签: 阅历杂谈

“什么是网站日志?什么样的场景下需要网站日志分析” 的相关文章

乌克兰安全研究人员吐槽 HackerOne 漏洞赏金平台不让提取资金

在俄乌冲突于 2 月下旬爆发后,许多西方国家都颁布了针对俄罗斯的制裁令。然而漏洞赏金平台 HackerOne 的做法,却让不少乌克兰安全研究人员也感到寒心。多位乌克兰黑客与研究人员在 Twitter 上控诉,HackerOne 正在阻止他们提取漏洞赏金,甚至有人被截留了数千美元。 由 Hacker...

Android 被爆安全漏洞 根源是苹果的无损音频编解码器

近日 Android 设备被爆存在安全漏洞,但根源来自于苹果的无损音频编解码器(ALAC)。目前,美国市场 95% 的 Android 设备来自于高通和联发科,安全公司 Check Point 指出尚未安装 2021 年 12 月 Android Security Patch 的设备都存在“Out-...

Project Zero 报告:2021 年共发现 58 个已被黑客利用的零日漏洞

Project Zero 是由 Google 专家和分析师组成的内部团队,负责寻找零日漏洞和其他对网络产生威胁的漏洞。本周二,该团队发布公告称,在 2021 年共发现了 58 个已被黑客利用的漏洞,刷新了历史记录。 零日漏洞是指开发人员刚刚意识到的安全缺陷,因此,他们有“零天”时间来修复...

微软分享针对 Mac 的 UpdateAgent 复杂木马的细节

网络安全仍然是一个不断发展的领域,对威胁者和安全专家来说都是如此。尽管如此,最近产生的一个积极因素是,公司更愿意与合作伙伴、专家和更大的社区分享信息,共同应对威胁。这方面的一个例子是,微软与苹果合作修补macOS设备中的”Shrootless”漏洞。微软已经提供了有关一个针对Mac的复杂木马的详细信...

新的跨平台 “SysJoker” 后门同时影响 macOS、Windows、Linux

据报道,新的”SysJoker”后门可以攻击多个操作系统,包括macOS、Windows和Linux。来自Intezer的研究人员透露,他们发现了SysJoker,这个后门最初被发现是攻击Linux的。不久之后,同一后门的变种被发现,它们可以扩展出对Windows和macOS进行攻击。 这一发现是...

因担心通风报信 FBI 暂缓公开 REvil 恶意软件的密钥

今年夏季 REvil 团伙发起了将近 3 周的大规模恶意软件攻击,美国联邦调查局(FBI)秘密扣留了密钥。该密钥本可以解密多达 1500 个网络上的数据和计算机,包括医院、学校和企业运营的网络。 援引华盛顿邮报报道,联邦调查局渗透了 REvil 团伙的服务器以获得该密钥。不过在和其他机构讨论之后,...

评论列表

语酌晴枙
2年前 (2022-06-01)

2:57 +0800] “GET /ucenter/avatar.php?uid=12373&size=small&type=virtual HTTP/1.1” 301 – “-

只酷以酷
2年前 (2022-06-01)

e-13563-do-friend-view-me.html HTTP/1.1” 200 5162 “-” “Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)” (注:Google)20

听弧绾痞
2年前 (2022-06-01)

+0800] “GET /ucenter/avatar.php?uid=12373&size=small&type=virtual HTTP/1.1” 301 – “-” “msnbot-media/1.1 (+http://search.msn.co

痴者欢烬
2年前 (2022-06-01)

200 7535 “-” “Mozilla/5.0 (compatible; Yahoo! Slurp China; http://misc.yahoo.com.cn/help.html

柔侣七禾
2年前 (2022-06-01)

:02:57 +0800] “GET /sns/source/script_menu.js HTTP/1.0” 200 7219 “http:/sns/space-5755-do-blog-view-me.html” “Mozilla/4.0 (com

发表评论

访客

◎欢迎参与讨论,请在这里发表您的看法和观点。