本發(fā)明公開了一種日志信息處理方法、系統(tǒng)及裝置。其中，該方法包括：日志收集程序從日志來(lái)源處讀取第一日志信息，日志收集程序運(yùn)行在終端上；日志收集程序在第一日志信息中增加存儲(chǔ)屬性信息，得到第二日志信息，其中，存儲(chǔ)屬性信息用于記錄第一日志信息的屬性；日志收集程序根據(jù)存儲(chǔ)屬性信息將第二日志信息寫入消息隊(duì)列，其中，消息隊(duì)列記錄在服務(wù)器上，服務(wù)器用于存儲(chǔ)消息隊(duì)列中的日志。本發(fā)明解決了收集日志信息復(fù)雜的技術(shù)問題。

技術(shù)領(lǐng)域

本發(fā)明涉及日志處理領(lǐng)域，具體而言，涉及一種日志信息處理方法、系統(tǒng)及裝置。

背景技術(shù)

現(xiàn)有技術(shù)中，日志系統(tǒng)用于日志的收集和集中管理，現(xiàn)有的日志系統(tǒng)可以包括收集、存儲(chǔ)、查詢，一種比較常見的日志收集方式是程序可能部署多份，每個(gè)程序都使用傳統(tǒng)的日志系統(tǒng)，將日志保存到所在的計(jì)算機(jī)本地文件中，每個(gè)程序需要配置單獨(dú)的收集程序，從本地文件中讀取日志，使用正則表達(dá)式進(jìn)行解析，并發(fā)送到消息隊(duì)列中。最終由一個(gè)總的負(fù)責(zé)收集日志部分從消息隊(duì)列中讀取匯總過(guò)來(lái)的數(shù)據(jù)，統(tǒng)一寫入存儲(chǔ)程序進(jìn)行存儲(chǔ)。但是，現(xiàn)有技術(shù)的方法有很大的缺點(diǎn)，即每部署一個(gè)程序，都需要單獨(dú)部署一個(gè)收集程序，而且每一種程序都需要維護(hù)自己的正則表達(dá)式，部署和維護(hù)都特別麻煩。

針對(duì)上述收集日志信息復(fù)雜的問題，目前尚未提出有效的解決方案。

發(fā)明內(nèi)容

本發(fā)明實(shí)施例提供了一種日志信息處理方法、系統(tǒng)及裝置，以至少解決收集日志信息復(fù)雜的技術(shù)問題。

根據(jù)本發(fā)明實(shí)施例的一個(gè)方面，提供了一種日志信息處理方法，包括：日志收集程序從日志來(lái)源處讀取第一日志信息，所述日志收集程序運(yùn)行在終端上；所述日志收集程序在所述第一日志信息中增加存儲(chǔ)屬性信息，得到第二日志信息，其中，所述存儲(chǔ)屬性信息用于記錄所述第一日志信息的屬性；所述日志收集程序根據(jù)所述存儲(chǔ)屬性信息將所述第二日志信息寫入消息隊(duì)列，其中，所述消息隊(duì)列記錄在服務(wù)器上，所述服務(wù)器用于存儲(chǔ)所述消息隊(duì)列中的日志。

進(jìn)一步地，所述日志收集程序在所述第一日志信息中增加存儲(chǔ)屬性信息包括：所述日志收集程序從所述服務(wù)器獲取存儲(chǔ)屬性信息；所述日志收集程序?qū)⑺龃鎯?chǔ)屬性信息增加到所述第一日志信息中。

進(jìn)一步地，所述日志收集程序在所述第一日志信息中增加存儲(chǔ)屬性信息包括：所述日志收集程序?qū)⒆x取到的第一日志信息轉(zhuǎn)換為預(yù)定格式；在轉(zhuǎn)換為預(yù)定格式的第一日志信息中增加所述存儲(chǔ)屬性信息。

進(jìn)一步地，所述存儲(chǔ)屬性信息包括：存儲(chǔ)索引、和/或存儲(chǔ)類型，其中，所述日志收集程序根據(jù)所述存儲(chǔ)屬性信息將所述第二日志信息寫入消息隊(duì)列包括：按照所述第二日志信息的存儲(chǔ)索引和/或所述存儲(chǔ)類型，將所述第二日志信息結(jié)構(gòu)化寫入所述消息隊(duì)列。

進(jìn)一步地，所述日志來(lái)源處包括：所述終端的本地日志文件。

根據(jù)本發(fā)明實(shí)施例的另一方面，還提供了一種日志信息處理系統(tǒng)，包括：一個(gè)或多個(gè)終端，每個(gè)所述終端上運(yùn)行有日志收集程序，所述日志收集程序用于從日志來(lái)源處讀取第一日志信息，并在所述第一日志信息中增加存儲(chǔ)屬性信息，得到第二日志信息，以及將所述第二日志信息寫入消息隊(duì)列，其中，所述存儲(chǔ)屬性信息用于記錄所述第一日志信息的屬性；服務(wù)器，所述消息隊(duì)列記錄在所述服務(wù)器上，所述服務(wù)器用于根據(jù)所述存儲(chǔ)屬性信息存儲(chǔ)所述消息隊(duì)列中的日志信息。

進(jìn)一步地，所述存儲(chǔ)屬性信息包括存儲(chǔ)類型和存儲(chǔ)索引。

根據(jù)本發(fā)明實(shí)施例的另一方面，還提供了一種日志信息處理裝置，包括：讀取單元，用于日志收集程序從日志來(lái)源處讀取第一日志信息，所述日志收集程序運(yùn)行在終端上；增加單元，用于所述日志收集程序在所述第一日志信息中增加存儲(chǔ)屬性信息，得到第二日志信息，其中，所述存儲(chǔ)屬性信息用于記錄所述第一日志信息的屬性；寫入單元，用于所述日志收集程序根據(jù)所述存儲(chǔ)屬性信息將所述第二日志信息寫入消息隊(duì)列，其中，所述消息隊(duì)列記錄在服務(wù)器上，所述服務(wù)器用于存儲(chǔ)所述消息隊(duì)列中的日志。