審計日志

首先，對于審計日志來說，記錄了某個時間點某個用戶從哪個IP發(fā)起對HiveServer或者MetaStore的請求以及記錄執(zhí)行的語句是什么。

如下的HiveServer審計日志，表示在2016-02-01 14:51:22 用戶user_chen向HiveServer發(fā)起了show tables請求，客戶端IP為192.168.1.18。

如下面MetaStore審計日志，表示在2016-01-29 11:31:15 用戶hive向MetaStore發(fā)起shutdown請求，客戶端ip為192.168.1.18。

通常情況下，審計日志對我們定位實際錯誤信息并無太大幫助。但在遇到諸如下述類問題時，需要查看審計日志：

如客戶端發(fā)起請求，但是遲遲未得到響應(yīng)。由于不確定到底是任務(wù)是卡在客戶端還是服務(wù)端，可以通過審計日志查看。如果審計日志根本沒有相關(guān)信息，那么說明卡死在客戶端；如審計日志有相關(guān)打印，那么就需要去運行日志里看到底程序卡在哪一步了。

查看指定時間段的任務(wù)請求個數(shù)。可通過審計日志查看在指定時間段到底有多少個請求。

HiveServer運行日志

簡言之，HiveServer負(fù)責(zé)接收客戶端請求(SQL語句)，然后編譯、執(zhí)行(提交到Y(jié)ARN或運行l(wèi)ocal MR)、與MetaStore交互獲取元數(shù)據(jù)信息等。HiveServer運行日志記錄了一個SQL完整的執(zhí)行過程。

通常情況下，當(dāng)我們遇到SQL語句運行失敗，我們首先要看的就是HiveServer運行日志。

MetaStore運行日志

通常情況下，當(dāng)我們遇到查看HiveServer運行日志時，如遇到MetaException或者連接MetaStore失敗，我們就需要去看MetaStore運行日志了。

GC日志查看

HiveServer和MetaStore均有GC日志，當(dāng)我們遇到GC問題可以查看GC日志以快速定位是否是GC導(dǎo)致。如，當(dāng)遇到HiveServer或MetaStore頻繁重啟就需要去看下對應(yīng)的GC日志了。

總結(jié)

以上是生活随笔為你收集整理的hive 日誌怎麼查看_Hive各个日志里都存放了什么信息？的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。