Logtail從入門到精通（二）：開啓日誌採集之旅

Logtail相關概念

爲了更好的瞭解日誌採集，這裏咱們首先對日誌採集中遇到的基本概念進行簡要的介紹。

概念介紹

• 項目：項目（Project）是日誌服務中的資源管理單元，用於資源隔離和控制。您能夠經過項目來管理某一個應用的全部日誌及相關的日誌源。它管理着用戶的全部日誌庫（Logstore），採集日誌的機器配置等信息，同時它也是用戶訪問日誌服務資源的入口。
• 日誌庫： 日誌庫（Logstore）是日誌服務中日誌數據的採集、存儲和查詢單元。每一個日誌庫隸屬於一個項目，且每一個項目能夠建立多個日誌庫。
• Logtail客戶端： Logtail是一款執行日誌收集工做的Agent，通常安裝在須要收集日誌的服務器上，做爲獨立軟件運行。
• 機器組：
  一個機器組包含一或多臺須要收集一類日誌的機器。經過綁定一組Logtail配置到一個機器組，可讓日誌服務根據一樣的Logtail配置採集一個機器組內全部服務器上的日誌。
• 採集配置：
  是Logtail收集日誌的策略集合，採集配置通常包括須要採集的數據源、解析方式、過濾方式等參數，全部採集配置均在控制檯進行管理。

各概念間關係

安裝配置流程

Logtail的安裝配置流程相對比較簡單，若是日誌服務和ECS在同一帳號下，則只需5個步驟便可實現採集。

• 日誌服務已經和ECS打通，可自動獲取ECS對應的owner信息，所以不須要設置aliuid信息。

安裝Logtail

ECS安裝

1. 購買一臺ECS
2. 根據ECS所在區域選擇Logtail安裝腳本（參見Logtail安裝指南）

例如華東1的經典網絡，使用wget http://logtail-release.oss-cn...; chmod 755 logtail.sh; sh logtail.sh install cn_hangzhou
使用/etc/init.d/ilogtaild status檢查Logtail運行狀態，如輸出ilogtail is running表示安裝成功

自建主機安裝
選擇任意公網Logtail安裝腳本（參見Logtail安裝指南）

例如選擇華東1公網安裝，使用wget http://logtail-release.oss-cn...; chmod 755 logtail.sh; sh logtail.sh install cn_hangzhou_internet
使用/etc/init.d/ilogtaild status檢查Logtail運行狀態，如輸出ilogtail is running表示安裝成功
配置帳號標識文件（參見非本人ECS/線下機器，配置完成後無需重啓Logtail）

配置

建立項目和日誌庫
在阿里雲官網產品中選擇日誌服務或直接點擊進入日誌服務控制檯，若您當前沒有開通，會提示您開通日誌服務，點擊開通。
點擊建立Project按鈕，地域(Region)中選擇Logtail安裝時所選的地域，例如選擇華東1（杭州）。

Project建立成功後會提示建立Logstore，點擊建立；這裏咱們輸入Logstore名稱，其餘參數無需修改，點擊確認。

建立採集配置
Logstore建立完畢後，會提示進行數據接入。以下圖所示，可經過三個入口建立採集配置：

在採集配置中咱們選擇極簡模式，日誌路徑中的文件夾和文件名分別輸入/var/log和message，點擊下一步。

建立機器組並應用

配置頁面點擊下一步後，會提示您選擇機器組，這裏咱們點擊建立機器組。

機器組配置頁面中選擇IP地址類型的機器組，IP輸入ECS的內網IP（Logtail獲取的IP地址可經過cat /usr/local/ilogtail/app_info.json查看）

保存機器組後，勾選該機器組並點擊應用到機器組。後續設置無需關心，直接點擊下一步。

查看日誌
此時採集配置已經建立完畢，您能夠嘗試退出從新登陸主機或輸入命令echo "test message" >> /var/log/message，這時本地/var/log/message文件會有新的日誌產生，Logtail就會採集到這些數據了。

點擊日誌庫頁面的預覽或查詢連接，便可看到Logtail採集上來的日誌了。

詳情請閱讀原文