服務器日志
日志實時
一、不多的主機和不多的應用部署場景用linux下的命令:tail,grep,cat,watch,awk,sed,less,sort,more,last,uniqu等linux日志文件說明
/var/log/message系統(tǒng)啟動后的信息和錯誤日志,是RedHatLinux中最常用的日志之一
/var/log/secure與安全相關的日志信息
/var/log/maillog與郵件相關的日志信息
/var/log/cron與定時任務相關的日志信息
/var/log/spooler與UUCP和news設備相關的日志信息
/var/log/boot.log守護進程啟動和停止相關的日志消息
/var/log/wtmp該日志文件永久記錄每個用戶登錄、注銷及系統(tǒng)的啟動、停機的事件
(一)如果日志在更新,如何實時查看
1、tail命令。-f指定文件-n輸出行數(shù)
tail-f/var/log/*.log-n10
2、watch命令。-d表示高亮不同的地方,-n表示多少秒刷新一次。
watch-d-n1cat/var/log/messages
該指令,不會直接返回命令行,而是實時打印日志文件中新增加的內容,
這一特性,對于查看日志是非常有效的。如果想終止輸出,按Ctrl+C即可。
3、看所有的重啟、關機記錄
last|grepreboot
last|grepshutdown
4、less命令。對文件或其它輸出進行分頁顯示的工具,比more更強大。
b向后翻一頁
d向后翻半頁
h顯示幫助界面
Q退出less命令
u向前滾動半頁
y向前滾動一行
空格鍵滾動一行
回車鍵滾動一頁
pagedown:向下翻動一頁
pageup:向上翻動一頁
二、多服務器、多應用部署場景的分布式系統(tǒng)日志監(jiān)控ELKstack中文指南
ELKStack是Elasticsearch、Logstash、Kibana三個開源軟件的組合。在實時數(shù)據(jù)檢索和分析場合,三者通常是配合共用,而且又都先后歸于Elastic.co公司名下,故有此簡稱。
ELKStack在最近兩年迅速崛起,成為機器數(shù)據(jù)分析,或者說實時日志處理領域,開源界的第一選擇。和傳統(tǒng)的日志處理方案相比,ELKStack具有如下幾個優(yōu)點:
處理方式靈活。Elasticsearch是實時全文索引,不需要像storm那樣預先編程才能使用;
配置簡易上手。Elasticsearch全部采用JSON接口,Logstash是RubyDSL設計,都是目前業(yè)界最通用的配置語法設計;
檢索性能高效。雖然每次查詢都是實時計算,但是優(yōu)秀的設計和實現(xiàn)基本可以達到全天數(shù)據(jù)查詢的秒級響應;
集群線性擴展。不管是Elasticsearch集群還是Logstash集群都是可以線性擴展的;
前端操作炫麗。Kibana界面上,只需要點擊鼠標,就可以完成搜索、聚合功能,生成炫麗的儀表板。
libbeat,該Go庫包含了所有beats公共部分來處理任務。beats是一個代理,將不同類型的數(shù)據(jù)發(fā)送到elasticsearch。beats可以直接將數(shù)據(jù)發(fā)送到elasticsearch,也可以通過logstash將數(shù)據(jù)發(fā)送elasticsearch。
beats有三個典型的例子:Filebeat、Topbeat、Packetbeat。Filebeat用來收集日志,Topbeat用來收集系統(tǒng)基礎設置數(shù)據(jù)如cpu、內存、每個進程的統(tǒng)計信息,Packetbeat是一個網(wǎng)絡包分析工具,統(tǒng)計收集網(wǎng)絡信息。架構圖如下:
轉自博客園
Tags:日志實時,服務器日志
版權聲明:本站文章來源標注為YINGSOO的內容版權均為本站所有,歡迎引用、轉載,請保持原文完整并注明來源及原文鏈接。禁止復制或仿造本網(wǎng)站,禁止在非www.sddonglingsh.com所屬的服務器上建立鏡像,否則將依法追究法律責任。本站部分內容來源于網(wǎng)友推薦、互聯(lián)網(wǎng)收集整理而來,僅供學習參考,不代表本站立場,如有內容涉嫌侵權,請聯(lián)系alex-e#qq.com處理。