什么是网站日志什么是网站日志
网站日志对于网站建设的作用相当于监控摄像头对我们的房间,它可以记录下来,这一段时间里面所有的访客到我们家来访问的这个记录。
那我们一个网站每天有很多的用户来访问,同时每天还有很多的搜索引擎的蜘蛛来抓取日志,网站日志就能够把所有访客访问的情况,它用什么浏览器,什么操作系统,什么时间点来访问,访问了哪些页面?日志能够把这些数据全部记录下来。
同时呢搜索引擎的蜘蛛过来抓取,它是百度的搜索引擎的蜘蛛,还是google的还是360的?他们过来抓取,分别是什么时间点抓取的哪些页面,抓取的时候返回值是什么?是正常打开还是打不开,所有这些数据都能够记录到一个叫做日志的一个文件里。网站日志怎么分析1.网站日志下载及数据解读
分析网站日志,我们可以了解搜索引擎蜘蛛来到我们网站访问的时候,它获取到的信息是什么?网站跟搜索引擎之间它是什么样的一个对话,那网站日志怎么进行分析,从哪里下载到这个数据?
通过FTP访问网站的根目录。可以看到一个包含log的文件夹,这是存放日志的地方。
如何查看网站日志
下载、解压、打开日志文件,日志文件内容如:
61.135.168.22 – – [11/Jan/2009:04:02:45 +0800] “GET /bbs/thread-7303-1-1.html HTTP/1.1” 200 8450 “-” “Baiduspider+(+http://www.baidu.com/search/spider.htm)” (注:百度,这部分为本文添加)
203.208.60.43 – – [11/Jan/2009:04:02:43 +0800] “GET /sns/space-13563-do-friend-view-me.html HTTP/1.1” 200 5162 “-” “Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)” (注:Google)
202.160.178.21 – – [11/Jan/2009:04:02:44 +0800] “GET /sns/space.php?uid=323 HTTP/1.0” 200 7535 “-” “Mozilla/5.0 (compatible; Yahoo! Slurp China; http://misc.yahoo.com.cn/help.html)” (注:雅虎)
65.55.220.217 – – [11/Jan/2009:04:02:57 +0800] “GET /ucenter/avatar.php?uid=12373&size= *** all&type=virtual HTTP/1.1” 301 – “-” “msnbot-media/1.1 (+http://search.msn.com/msnbot.htm)” (注:MSN)
65.55.109.46 – – [11/Jan/2009:04:02:57 +0800] “GET /sns/source/script_menu.js HTTP/1.0” 200 7219 “http:/sns/space-5755-do-blog-view-me.html” “Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.2; SV1; .NET CLR 1.1.4322)
大概就是上面这样密密麻麻的代码,但是这些代码怎么理解呢。比较好理解,我们看一下这一串日志的内容。前面这个ip代表今天来访问我们的网站,它是什么ip?是用户呢还是搜索引擎蜘蛛它都有一个ip,就是把他的ip记录下来。后面这个是一个时间点,什么时间来访问我们的网站?然后呢get就是抓取,抓取的哪一个文件呢?抓取了这个文件。
就是我们的域名下面的www.xxx.com/BBS什么什么,把这个文件抓取回去。抓取回去之后呢200,这是http状态码,它代表抓取成功,然后后面这个数字代表抓取了多少个字节?那200,然后这个8000多就是代表成功抓取了8000多个字节,也就是我们一个网页的大概的大小。那后面这一段就是代表蜘蛛,Baidu Spider就代表百度的蜘蛛,那这一句就代表这个内容是百度蜘蛛过来抓取,成功抓取了这么多个字节。
好,那我们再看这个上面就可以看出这个是谁的蜘蛛,yahuspider这是雅虎的它是这个时间点。然后这上面是谁的呢?google的,对吧?最下面看一下,里面没有看到这是哪一个具体的搜索引擎。那它是谁?你看这个有MSIE6.0。这就说明微软的ie6.0,这是一个用户在来抓取和访问的一个页面。
所以日志它就这样的一个文件,把每天每时每刻用户和蜘蛛来抓取我们网站的所有的情况,把它记录下来。
2.分析网站日志工具是什么?
这个日志文件,里面看起来密密麻麻的,非常的费劲。一般人是没法看明白的。而且如果我们的网站的访问量非常大的话,那这个日志往往会有几十兆几百兆甚至几个G的这个大小。那我们在电脑上打开的时候,有的时候电脑都会卡死掉。那么就会用到网站日志分析工具。
一般分析网站日志我们用光年日志工具分析.关于这个工具的使用,大家可以看一下这篇https://jingyan.baidu.com/article/15622f240a2e6afdfcbea58a.html百度经验了解一下,也可以去搜外的网站上看一下有免费的教程。
3.网站日志分析http状态码的解读
那刚才我们看这个日志的时候,看到里面有一些刚才提到一个词叫做http状态码,有看到200或者404,这个叫做HTTP状态码。
那这个http状态码,就是代表搜索引擎蜘蛛或者用户来访问我们网站的时候,它是什么样的一个状态?什么样的一个情况?200就代表成功抓取了,如果是404就代表过来抓取这个链接, 但是这个链接不存在,所以它就返回404。那状态码一般有200或者404,或者500等等这样的几个常见的数字,
我们不用了解特别多,只要大概的知道这么几个数字代表什么?200代表成功抓取,404代表错误链接,500代表服务器出问题了,大概了解这么几个数据就可以了,不需要把所有的都记住。那如果想要了解更多http状态码的这个知识的话,可以在百度上搜索一下,就可以查询到所有这些代码分别代表什么意思?什么样的场景下需要网站日志分析那么对于一个职业网站优化人员日志分析的能力是必须要掌握的。那什么样的场景下需要日志分析%2c下面我们看一下.
1.比如说我们创建了一个网站,提交给搜索引擎,后来很长时间没看到搜索引擎的收录,那这个时候我们就需要下载日志来分析一下,看搜索引擎到底有没有过来抓取。
2.我们网站原来可能排名很好, 后来突然间发现异常了,那我们就需要把日志下载下来看一下搜索引擎这段时间过来抓取我们网站的时候, 它是不是有一些异常情况。
3.网站如果被人攻击或者入侵,那也要下载一下网站日志来分析我们这个问题出在什么时间点,什么地方?
做网站日志分析,我们采用的一个 *** 一般是对比法, 就是我们网站和排名都正常的情况的日志, 和现在出问题的时候的日志,拿出来进行对比, 采用光年日志分析,把这个数据拿出来看一下,看问题出在哪一个目录,或者说哪一些页面, 然后再去针对性的去研究一下。
据知情人士透露,苹果和Meta在2021年年中回应了伪造的“紧急数据请求”,向黑客提供了用户的基本信息,如客户的地址、电话号码和IP地址。伪造的“紧急数据请求”是由多个国家/地区的执法人员的被黑电子邮件域发送的,并且经过精心设计,带有真实或虚构执法人员的伪造签名,看起来合法。 据彭博社报道,一个名...
近日 Android 设备被爆存在安全漏洞,但根源来自于苹果的无损音频编解码器(ALAC)。目前,美国市场 95% 的 Android 设备来自于高通和联发科,安全公司 Check Point 指出尚未安装 2021 年 12 月 Android Security Patch 的设备都存在“Out-...
Google周四宣布,当用户打开托管在Google硬盘上的潜在可疑或危险文件时,它会开始警告用户。“我们将显示一个警告横幅,以帮助保护[用户]和他们的组织免受恶意软件、网络钓鱼和勒索软件的侵害。此前打开Google文档、表单、幻灯片和绘图时,已经有了这些警告。” 这次安全功能升级是完全被动的,管理...
据CNN报道,红十字国际委员会(ICRC)周三表示,该组织使用的一个承包商遭到的网络攻击已经泄露了超过51.5万名“高危人群”的个人数据,包括因冲突和灾难而与家人分离的人。 该人道主义组织说,黑客攻击迫使红十字会关闭了支持因冲突、移民或灾难而分离的家庭团聚的IT系统。 目前还不清楚谁是这次网络事件...
据报道,新的”SysJoker”后门可以攻击多个操作系统,包括macOS、Windows和Linux。来自Intezer的研究人员透露,他们发现了SysJoker,这个后门最初被发现是攻击Linux的。不久之后,同一后门的变种被发现,它们可以扩展出对Windows和macOS进行攻击。 这一发现是...
据ZDNet报道,新加坡政府与美国政府签署了几份谅解备忘录,以扩大他们在国防、银行和研究与开发等领域的网络安全合作。这些活动包括增加信息共享、团队建设、培训和技能发展。 在美国副总统卡马拉·哈里斯为期三天的访问中的周一签署了三份谅解备忘录。其中一个是新加坡和美国网络安全和基础设施安全局之间的协议,...