摘要：?為了更好的了解日志采集，這里我們首先對日志采集中遇到的基本概念進行簡要的介紹。

Logtail相關概念

為了更好的了解日志采集，這里我們首先對日志采集中遇到的基本概念進行簡要的介紹。

概念介紹

• 項目：?項目（Project）是日志服務中的資源管理單元，用于資源隔離和控制。您可以通過項目來管理某一個應用的所有日志及相關的日志源。它管理著用戶的所有日志庫（Logstore），采集日志的機器配置等信息，同時它也是用戶訪問日志服務資源的入口。
• 日志庫：?日志庫（Logstore）是日志服務中日志數據的采集、存儲和查詢單元。每個日志庫隸屬于一個項目，且每個項目可以創建多個日志庫。
• Logtail客戶端：?Logtail是一款執行日志收集工作的Agent，一般安裝在需要收集日志的服務器上，作為獨立軟件運行。
• 機器組：?一個機器組包含一或多臺需要收集一類日志的機器。通過綁定一組Logtail配置到一個機器組，可以讓日志服務根據同樣的Logtail配置采集一個機器組內所有服務器上的日志。
• 采集配置：?是Logtail收集日志的策略集合，采集配置一般包括需要采集的數據源、解析方式、過濾方式等參數，所有采集配置均在控制臺進行管理。

各概念間關系

日志庫直接負責日志存儲，所有Logtail采集的數據最終都會存儲到日志庫中。

日志庫由項目進行管理，項目和日志庫的關系類似于數據庫和表之間的關系。

一個日志庫中可包含多個不同的采集配置，日志庫下的采集配置默認將數據采集到該日志庫。

采集配置并不直接應用于Logtail客戶端，而是應用于中間層的機器組，便于大規模集群和應用的靈活管理。

一個Logtail可屬于多個機器組，一個機器組可包含多個Logtail，實現Logtail與機器組的解耦。

一個采集配置可應用到多個機器組，一個機器組可關聯多個采集配置，實現機器組與采集配置的解耦。

安裝配置流程

Logtail的安裝配置流程相對比較簡單，如果日志服務和ECS在同一賬號下，則只需5個步驟即可實現采集。

• 日志服務已經和ECS打通，可自動獲取ECS對應的owner信息，因此不需要設置aliuid信息。

安裝Logtail

ECS安裝

購買一臺ECS

根據ECS所在區域選擇Logtail安裝腳本（參見Logtail安裝指南）

• 例如華東1的經典網絡，使用wget http://logtail-release.oss-cn-hangzhou-internal.aliyuncs.com/linux64/logtail.sh; chmod 755 logtail.sh; sh logtail.sh install cn_hangzhou

使用/etc/init.d/ilogtaild status檢查Logtail運行狀態，如輸出ilogtail is running表示安裝成功

自建主機安裝

選擇任意公網Logtail安裝腳本（參見Logtail安裝指南）

• 例如選擇華東1公網安裝，使用wget http://logtail-release.oss-cn-hangzhou.aliyuncs.com/linux64/logtail.sh; chmod 755 logtail.sh; sh logtail.sh install cn_hangzhou_internet

使用/etc/init.d/ilogtaild status檢查Logtail運行狀態，如輸出ilogtail is running表示安裝成功

配置賬號標識文件（參見非本人ECS/線下機器，配置完成后無需重啟Logtail）

配置

創建項目和日志庫

在阿里云官網產品中選擇日志服務或直接點擊進入日志服務控制臺，若您當前沒有開通，會提示您開通日志服務，點擊開通。

點擊創建Project按鈕，地域(Region)中選擇Logtail安裝時所選的地域，例如選擇華東1（杭州）。

Project創建成功后會提示創建Logstore，點擊創建；這里我們輸入Logstore名稱，其他參數無需修改，點擊確認。

創建采集配置

Logstore創建完畢后，會提示進行數據接入。如下圖所示，可通過三個入口創建采集配置：

在彈出的數據接入頁面中，我們選擇自定義數據中的文本文件接入。

在采集配置中我們選擇極簡模式，日志路徑中的文件夾和文件名分別輸入/var/log和message，點擊下一步。

創建機器組并應用

配置頁面點擊下一步后，會提示您選擇機器組，這里我們點擊創建機器組。

機器組配置頁面中選擇IP地址類型的機器組，IP輸入ECS的內網IP（Logtail獲取的IP地址可通過cat /usr/local/ilogtail/app_info.json查看）

保存機器組后，勾選該機器組并點擊應用到機器組。后續設置無需關心，直接點擊下一步。

查看日志

此時采集配置已經創建完畢，您可以嘗試退出重新登錄主機或輸入命令echo "test message" >> /var/log/message，這時本地/var/log/message文件會有新的日志產生，Logtail就會采集到這些數據了。

點擊日志庫頁面的預覽或查詢鏈接，即可看到Logtail采集上來的日志了。

原文鏈接

干貨好文，請關注掃描以下二維碼：

總結

以上是生活随笔為你收集整理的Logtail从入门到精通（二）：开启日志采集之旅的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。