[發(fā)明專利]一種基于映射關(guān)系的數(shù)據(jù)自動化處理方法有效
| 申請?zhí)枺?/td> | 201911309901.8 | 申請日: | 2019-12-18 |
| 公開(公告)號: | CN110955805B | 公開(公告)日: | 2023-08-25 |
| 發(fā)明(設(shè)計)人: | 劉朝;夏揚(yáng);楊莉美;謝晶晶;陳羽棋;歐燕林 | 申請(專利權(quán))人: | 重慶大數(shù)據(jù)研究院有限公司 |
| 主分類號: | G06F16/901 | 分類號: | G06F16/901;G06F16/903 |
| 代理公司: | 重慶信航知識產(chǎn)權(quán)代理有限公司 50218 | 代理人: | 穆祥維 |
| 地址: | 401120 重慶市*** | 國省代碼: | 重慶;50 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 一種 基于 映射 關(guān)系 數(shù)據(jù) 自動化 處理 方法 | ||
1.一種基于映射關(guān)系的數(shù)據(jù)自動化處理方法,其特征在于,包括以下步驟:
S1:導(dǎo)入基礎(chǔ)標(biāo)準(zhǔn)數(shù)據(jù),并根據(jù)基礎(chǔ)標(biāo)準(zhǔn)數(shù)據(jù)建立標(biāo)準(zhǔn)映射關(guān)系;
S2:在標(biāo)準(zhǔn)映射關(guān)系的基礎(chǔ)上自定義映射規(guī)則;
S3:自動檢測標(biāo)準(zhǔn)映射關(guān)系版本情況,根據(jù)分類映射等級顆粒度,對步驟S1標(biāo)準(zhǔn)映射關(guān)系和步驟S2中的自定義映射規(guī)則進(jìn)行集合運(yùn)算和文本匹配,自動生成新版標(biāo)準(zhǔn)映射關(guān)系的映射規(guī)則,并顯示差異映射規(guī)則;
S4:導(dǎo)入目標(biāo)處理數(shù)據(jù),目標(biāo)處理數(shù)據(jù)基于自定義映射規(guī)則進(jìn)行處理,自定義映射規(guī)則調(diào)用步驟S3中新版標(biāo)準(zhǔn)映射關(guān)系以及差異映射關(guān)系;
S5:執(zhí)行腳本處理,輸出處理結(jié)果;
在步驟S1和步驟S4中,導(dǎo)入的基礎(chǔ)標(biāo)準(zhǔn)數(shù)據(jù)以及目標(biāo)處理數(shù)據(jù)均為結(jié)構(gòu)化或半結(jié)構(gòu)化的數(shù)據(jù)庫表,其中均必須包含描述映射左集合的字段以及數(shù)據(jù)庫主鍵這兩個字段。
2.根據(jù)權(quán)利要求1所述的基于映射關(guān)系的數(shù)據(jù)自動化處理方法,其特征在于,步驟S4中,差異映射關(guān)系為標(biāo)準(zhǔn)映射關(guān)系與自定義映射規(guī)則之間的差異表現(xiàn),其中體現(xiàn)在:映射增加、映射減少、分類表述變化和映射轉(zhuǎn)移。
3.根據(jù)權(quán)利要求2所述的基于映射關(guān)系的數(shù)據(jù)自動化處理方法,其特征在于,步驟S3中,進(jìn)行自定義映射規(guī)則與標(biāo)準(zhǔn)映射關(guān)系的集合運(yùn)算和文本匹配是采用以下算法:
A∩B={e|e∈A且e∈B}。
4.根據(jù)權(quán)利要求3所述的基于映射關(guān)系的數(shù)據(jù)自動化處理方法,其特征在于,步驟S3中,字符串A表示所述標(biāo)準(zhǔn)映射關(guān)系的所有分類條目的集合,字符串B表示所述自定義映射規(guī)則中所有分類條目的集合。
5.根據(jù)權(quán)利要求4所述的基于映射關(guān)系的數(shù)據(jù)自動化處理方法,其特征在于,還包括編輯距離算法,計算字符串A轉(zhuǎn)化為字符串B所需要的最少操作數(shù)。
6.據(jù)權(quán)利要求5所述的基于映射關(guān)系的數(shù)據(jù)自動化處理方法,其特征在于,步驟S1和步驟S4中將基礎(chǔ)標(biāo)準(zhǔn)數(shù)據(jù)導(dǎo)入標(biāo)準(zhǔn)映射關(guān)系以及目標(biāo)處理數(shù)據(jù)導(dǎo)入自定義映射規(guī)則中時,均將數(shù)據(jù)文件分為多個數(shù)據(jù)塊,將所述數(shù)據(jù)塊存儲在數(shù)據(jù)服務(wù)器上,數(shù)據(jù)服務(wù)器對數(shù)據(jù)塊進(jìn)行處理、存儲以及調(diào)用。
7.據(jù)權(quán)利要求6所述的基于映射關(guān)系的數(shù)據(jù)自動化處理方法,其特征在于,步驟S5中執(zhí)行腳本處理,形成數(shù)據(jù)item編碼和映射結(jié)果字段,其中數(shù)據(jù)item編碼和映射結(jié)果字段為結(jié)構(gòu)化一對一映射的數(shù)據(jù)。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于重慶大數(shù)據(jù)研究院有限公司,未經(jīng)重慶大數(shù)據(jù)研究院有限公司許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服】
本文鏈接:http://www.17sss.com.cn/pat/books/201911309901.8/1.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
- 數(shù)據(jù)顯示系統(tǒng)、數(shù)據(jù)中繼設(shè)備、數(shù)據(jù)中繼方法、數(shù)據(jù)系統(tǒng)、接收設(shè)備和數(shù)據(jù)讀取方法
- 數(shù)據(jù)記錄方法、數(shù)據(jù)記錄裝置、數(shù)據(jù)記錄媒體、數(shù)據(jù)重播方法和數(shù)據(jù)重播裝置
- 數(shù)據(jù)發(fā)送方法、數(shù)據(jù)發(fā)送系統(tǒng)、數(shù)據(jù)發(fā)送裝置以及數(shù)據(jù)結(jié)構(gòu)
- 數(shù)據(jù)顯示系統(tǒng)、數(shù)據(jù)中繼設(shè)備、數(shù)據(jù)中繼方法及數(shù)據(jù)系統(tǒng)
- 數(shù)據(jù)嵌入裝置、數(shù)據(jù)嵌入方法、數(shù)據(jù)提取裝置及數(shù)據(jù)提取方法
- 數(shù)據(jù)管理裝置、數(shù)據(jù)編輯裝置、數(shù)據(jù)閱覽裝置、數(shù)據(jù)管理方法、數(shù)據(jù)編輯方法以及數(shù)據(jù)閱覽方法
- 數(shù)據(jù)發(fā)送和數(shù)據(jù)接收設(shè)備、數(shù)據(jù)發(fā)送和數(shù)據(jù)接收方法
- 數(shù)據(jù)發(fā)送裝置、數(shù)據(jù)接收裝置、數(shù)據(jù)收發(fā)系統(tǒng)、數(shù)據(jù)發(fā)送方法、數(shù)據(jù)接收方法和數(shù)據(jù)收發(fā)方法
- 數(shù)據(jù)發(fā)送方法、數(shù)據(jù)再現(xiàn)方法、數(shù)據(jù)發(fā)送裝置及數(shù)據(jù)再現(xiàn)裝置
- 數(shù)據(jù)發(fā)送方法、數(shù)據(jù)再現(xiàn)方法、數(shù)據(jù)發(fā)送裝置及數(shù)據(jù)再現(xiàn)裝置





