本發明提供一種將數據寫入內存的方法及裝置，該方法包括：獲取存儲有定長數據和不定長數據的寫入文件；其中，寫入文件中的每條定長數據包括一條源數據的定長數據以及該條源數據的不定長數據的索引信息，寫入文件中的每條不定長數據包括一條源數據的不定長數據；寫入文件中的所有不定長數據連續存儲以及所有定長數據連續存儲；按照字節對齊的方式，從所述寫入文件中讀取所有定長數據，并將讀取的定長數據寫入內存；根據寫入文件中定長數據包含的索引信息，從所述寫入文件中讀取與所述索引信息對應的不定長數據，并將讀取的不定長數據寫入內存。本發明減少了數據讀取和寫入操作的次數，耗時較短、效率較高。

技術領域

本發明涉及數據處理技術領域，尤其涉及一種將數據寫入內存的方法及裝置。

背景技術

目前在很多的應用場景下，如地圖數據庫、學生信息庫、病患信息庫等，在這些信息庫中包括多條源數據，每條源數據包含的數據項數量相同，有些數據項對應的字符串長度在所有的源數據中是固定的(則這種數據項稱為定長數據)，有些數據項對應的字符串長度在不同源數據中為可變的。每一條源數據包括多項信息(則這種數據項稱為不定長數據)。以學生信息庫為例：每一條源數據為一個學生的信息，一條源數據包括以下數據項：名字、學號、院系、班級、家庭住址、各科成績；則在該源數據中學號、各科成績均是數值其對應的數值的長度為固定的如一個字節，而班級、名字、院系、家庭住址這些數據項對于不同的學生是不同的，如有些學生的名字為2個漢字，有些學生的名字為3個，甚至還有些學生的名字為4個漢字，因此同樣是名字這個數據項，但是在不同的源數據中其占的字節數是不同的，因此前述班級、名字、院系、家庭住址這些數據項為不定長數據。

現有技術中，在將源數據文件中的源數據加載到內存中，首先需要將源數據文件中的數據存儲至寫入文件中，再從寫入文件中讀取源數據寫入至內存中。目前源數據文件的源數據存儲格式與寫入文件中的源數據存儲結構一致。

目前將源數據文件中的源數據存儲至寫入文件中的過程為：每讀取一條源數據則將該條源數據存儲至寫入文件中，在寫入文件中存儲該條源數據在寫入文件中的偏移、源數據的總長度、源數據中不定長數據的長度、不定長數據以及源數據中的定長數據。

如下表1為源數據文件中源數據的存儲格式：

表1