[發明專利]一種基于負載均衡的文件系統日志模型在審
| 申請號: | 201410111765.2 | 申請日: | 2014-03-25 |
| 公開(公告)號: | CN103902382A | 公開(公告)日: | 2014-07-02 |
| 發明(設計)人: | 王通;郭鵬;姜偉麗 | 申請(專利權)人: | 浪潮電子信息產業股份有限公司 |
| 主分類號: | G06F9/50 | 分類號: | G06F9/50 |
| 代理公司: | 暫無信息 | 代理人: | 暫無信息 |
| 地址: | 250101 山東*** | 國省代碼: | 山東;37 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 基于 負載 均衡 文件系統 日志 模型 | ||
技術領域
本發明涉及計算機系統領域,具體涉及一種基于負載均衡的文件系統日志模型。
背景技術
進入21世紀以來,隨著信息時代的加速,企業數據呈現出爆炸性增長的趨勢,特別是移動互聯網、物聯網和云計算的發展更加劇了數據的爆炸式增長。IDC報告指出,全球數據量每年以60%的速度遞增,2010年全球數據量達1.8ZB,2015年將達到8ZB,2020年將達到35ZB,標志著“大數據”時代的到來。數據的大量增長伴隨著人們對快速獲取數據的渴望,同時隨著數據量的增長,存放數據的存儲系統規模也越來越大,當系統失效時,隨之而來的數據修復工作規模也越來越大,要求對數據修復的時間也盡可能的少。
當今存儲系統中,很大一部分是文件系統,而基于日志的文件系統已經成為主流,寫入時首先要寫入日志,而后再寫入文件系統,數據修復時也是依賴文件系統來進行修復。底層的磁盤文件系統,如ext3、ext4等日志和數據是存放在同一塊磁盤上的,極大的限制了日志和數據的讀寫效率,大型集群文件系統雖然有單獨的日志盤,但每個底層數據盤附帶一塊日志盤的做法在大量讀寫該數據盤上數據時性能不高,且成本很高。
發明內容
本發明針對現有技術存在的不足之處,提供一種基于負載均衡的文件系統日志模型。
本發明公開了一種基于負載均衡的文件系統日志模型,其解決所述技術問題采用的技術方案如下:該基于負載均衡的文件系統日志模型的體系結構包括:日志存儲池映射模塊(1)、日志存儲池模塊(2)、日志進程池(3)和日志緩沖池(4)四大部分,其中:
日志存儲池映射模塊(1)是結構的核心,負責建立日志ID和日志存儲池中存儲位置的映射關系以及實時監測日志存儲池中設備負載及容量信息情況;
日志存儲池模塊(2)主要聚合多個存儲設備,構建日志存儲池,對外提供日志讀寫存儲服務;
日志進程池(3)主要檢索日志存儲池映射模塊(1)以及日志緩沖池(4),根據日志ID計算其在日志存儲池(2)中的存儲位置,讀取日志或將日志寫入日志存儲池(2);
日志緩沖池(4)主要用于緩存日志信息。
該基于負載均衡的文件系統日志模型以負載檢測和動態分配為核心,通過整合日志緩沖池、日志進程池、日志存儲池、日志存儲池映射模塊,使該模型可以根據日志系統各日志盤容量及負載情況動態分配日志任務,同時可按需從日志系統中讀取數據滿足fsck等檢測修復應用程序處理需求,提高日志寫入及讀取的效率。
本發明公開的基于負載均衡的文件系統日志模型的有益效果是:
通過所述基于負載均衡的文件系統日志模型,能夠多進程處理緩沖池中的日志信息,每個進程都會根據日志ID計算出的存儲位置,直接將日志信息寫入指定存儲位置,提高日志寫入效率,同時采用日志存儲池的方式,日志分散存儲,可同時發出多個請求,提高日志讀取的效率。
附圖說明
附圖1為傳統的日志系統模型圖;
附圖2為本發明基于負載均衡的日志系統模型圖。
具體實施方式
下面結合附圖,對本發明所公開的基于負載均衡的文件系統日志模型做進一步詳細說明。
本發明所述基于負載均衡的文件系統日志模型的體系結構主要包括:日志存儲池映射模塊(1)、日志存儲池模塊(2)、日志進程池(3)、日志緩沖池(4);其中:
日志存儲池映射模塊(1)是結構的核心,負責建立日志ID和日志存儲池中存儲位置的映射關系以及實時監測日志存儲池中設備負載及容量信息情況;
日志存儲池模塊(2)主要聚合多個存儲設備,構建日志存儲池,對外提供日志讀寫存儲服務;
日志進程池(3)檢索日志存儲池映射模塊(1)以及日志緩沖池(4),根據日志ID計算其在日志存儲池(2)中的存儲位置,讀取日志或將日志寫入日志存儲池(2);
日志緩沖池(4)的作用為緩存日志信息。
本發明的結構區別于傳統的日志系統:現有的日志模型的采用單進程方式,讀寫性能低,影響了文件系統讀寫的效率。本發明的特征在于以負載檢測和動態分配為核心,通過整合日志緩沖池、日志進程池、日志存儲池、日志存儲池映射模塊,使該模型可以根據日志系統各日志盤容量及負載情況動態分配日志任務,同時可按需從日志系統中讀取數據滿足fsck等檢測修復應用程序處理需求,提高日志寫入及讀取的效率。
采用本發明所述基于負載均衡的文件系統日志模型的具體實現過程如下:
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于浪潮電子信息產業股份有限公司,未經浪潮電子信息產業股份有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.17sss.com.cn/pat/books/201410111765.2/2.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:一種LED洗墻燈密封裝置
- 下一篇:發酵型紅曲葡萄醋組合物





