本發(fā)明涉及數(shù)據(jù)處理,尤其涉及一種民航物流數(shù)據(jù)交換方法。
背景技術(shù):
1、在民航物流領(lǐng)域中,涉及多個數(shù)據(jù)終端設(shè)備(dte)之間為實現(xiàn)貨物的追蹤、管理和優(yōu)化而建立的臨時數(shù)據(jù)通信互連通路。數(shù)據(jù)交換的目的不僅在于獲取標準化的物流信息,如貨物的航班號、起降時間、重量及體積等通用數(shù)據(jù),這些數(shù)據(jù)在通用系統(tǒng)架構(gòu)下能夠輕松實現(xiàn)讀、寫、增、刪等操作。然而,隨著物流業(yè)務(wù)的復(fù)雜化和多樣化,越來越多的非通用數(shù)據(jù)涌現(xiàn)出來,如特定航空公司獨有的貨物編碼、特殊貨物的處理要求、以及由不同圖形應(yīng)用編輯的貨物照片或示意圖等。因此,在民航物流領(lǐng)域,迫切需要一種高效、靈活的數(shù)據(jù)交換方法,能夠自動識別和處理各種通用及非通用數(shù)據(jù),確保物流信息的準確傳遞和及時處理,從而提升整個物流鏈路的運作效率和客戶滿意度。
2、申請?zhí)枮?02311287788.4的中國發(fā)明專利提供了一種數(shù)據(jù)交換方法以及平臺,獲取待交換數(shù)據(jù)的頭信息,識別用戶需求,選擇數(shù)據(jù)交換區(qū)和對應(yīng)的相關(guān)應(yīng)用程序,每一個數(shù)據(jù)交換區(qū)均生成基礎(chǔ)標識文件并與待交換數(shù)據(jù)進行對比得到第一基礎(chǔ)標識文件,根據(jù)第一基礎(chǔ)標識文件確定待交換數(shù)據(jù)的交換對象。
3、但在現(xiàn)有技術(shù)中,數(shù)據(jù)處理流程模式固定,難以適應(yīng)不同數(shù)據(jù)類型的處理需求,尤其在數(shù)據(jù)處理過程中,各交換區(qū)之間的協(xié)同工作依賴于基礎(chǔ)標識文件的對比,導致數(shù)據(jù)交換效率低下。
技術(shù)實現(xiàn)思路
1、本申請通過提供一種民航物流數(shù)據(jù)交換方法,解決了現(xiàn)有技術(shù)中數(shù)據(jù)處理模式固定導致數(shù)據(jù)交換效率低下的問題,實現(xiàn)了動態(tài)調(diào)整數(shù)據(jù)交換模式,提高數(shù)據(jù)交換效率的技術(shù)效果。
2、本申請?zhí)峁┝艘环N民航物流數(shù)據(jù)交換方法,所述方法包括:
3、s100:接收待交換數(shù)據(jù),建立智能路由模型,根據(jù)所述待交換數(shù)據(jù)信息和歷史信任鏈,選擇數(shù)據(jù)交換路徑和理想交換區(qū),通過自動補正機制對不完整的待交換數(shù)據(jù)信息進行補全驗證,形成預(yù)處理數(shù)據(jù)集;
4、s200:建立數(shù)據(jù)轉(zhuǎn)碼引擎接收所述預(yù)處理數(shù)據(jù)集,將預(yù)處理數(shù)據(jù)集轉(zhuǎn)化成目標數(shù)據(jù)集;具體包括:識別當前理想交換區(qū)的負載情況,決定最終交換區(qū),將待交換數(shù)據(jù)信息轉(zhuǎn)換為目標數(shù)據(jù);使用航空語義網(wǎng)技術(shù)對預(yù)處理數(shù)據(jù)集中剩余數(shù)據(jù)做進一步標準化處理形成標準剩余數(shù)據(jù);將目標數(shù)據(jù)和標準剩余數(shù)據(jù)封裝成目標數(shù)據(jù)集;
5、s300:接收到目標數(shù)據(jù)集,按照數(shù)據(jù)交換路徑傳輸?shù)较乱粋鬏敼?jié)點。
6、進一步地,所述待交換數(shù)據(jù)信息包括數(shù)據(jù)類型、來源以及數(shù)據(jù)交換需求,所述數(shù)據(jù)交換需求是指需要轉(zhuǎn)換的數(shù)據(jù)格式、接收方信息以及數(shù)據(jù)傳輸條件,所述來源是指上傳方和接收方的地址信息;所述數(shù)據(jù)交換路徑是指數(shù)據(jù)從起始點到目標點所經(jīng)過的所有傳輸節(jié)點和連接的序列,所述傳輸節(jié)點是指在所述數(shù)據(jù)交換路徑中的每個實體;所述預(yù)處理數(shù)據(jù)集包括補全后的待交換數(shù)據(jù)信息、數(shù)據(jù)交換路徑和理想交換區(qū);所述歷史信任鏈是通過企業(yè)信任鏈數(shù)據(jù)庫和信任鏈評估模塊分析得到。
7、進一步地,所述企業(yè)信任鏈數(shù)據(jù)庫包括每家企業(yè)的歷史發(fā)送數(shù)據(jù)、接收方反饋數(shù)據(jù)以及數(shù)據(jù)質(zhì)量評估數(shù)據(jù);所述信任鏈評估模塊是根據(jù)歷史數(shù)據(jù)傳輸評估效果對每條所述數(shù)據(jù)交換路徑進行信任度評分,選取信任度評分最高的數(shù)據(jù)交換路徑作為歷史信任鏈。
8、進一步地,所述自動補正機制包括地址驗證和地址補全,所述地址驗證是根據(jù)所有已知的有效地址驗證所述待交換數(shù)據(jù)信息中的地址信息,并返回結(jié)果;所述地址補全是對于有效但部分內(nèi)容不完整的地址信息,通過填補方法進行補全,并對補全后的地址進行二次驗證。
9、進一步地,所述智能路由模型是以常見交換路徑作為基礎(chǔ)數(shù)據(jù),使用深度神經(jīng)網(wǎng)絡(luò)作為基礎(chǔ)模型進行訓練;其中,從歷史數(shù)據(jù)交換記錄中收集所有已完成的數(shù)據(jù)交換路徑信息,對于收集到的每條數(shù)據(jù)交換路徑,統(tǒng)計出現(xiàn)頻數(shù);預(yù)先設(shè)定頻率基數(shù)和頻繁度閾值,所述頻繁度閾值是所述頻率基數(shù)與數(shù)據(jù)交換路徑總數(shù)量的乘積;將出現(xiàn)頻數(shù)超過所述頻繁度閾值的路徑視為常見交換路徑。
10、進一步地,所在步驟s100中,選擇數(shù)據(jù)交換路徑,還包括:根據(jù)歷史信任鏈為基礎(chǔ)數(shù)據(jù),建立數(shù)據(jù)源檔案庫,結(jié)合當前待交換數(shù)據(jù)信息,實時評估數(shù)據(jù)源檔案庫中各數(shù)據(jù)交換路徑的綜合情況,同時根據(jù)企業(yè)的歷史數(shù)據(jù)交換路徑和需求特性,生成交換路徑優(yōu)先隊列,建立路徑?jīng)_突檢測機制,實時監(jiān)控各路徑的使用情況,動態(tài)調(diào)整數(shù)據(jù)交換任務(wù)。
11、進一步地,所述數(shù)據(jù)源檔案庫是以企業(yè)為起始點,以歷史數(shù)據(jù)交換路徑為發(fā)展線,記錄每個企業(yè)歷史數(shù)據(jù)交換路徑、交換區(qū)、歷史傳輸節(jié)點以及相關(guān)的性能指標,所述性能指標包括使用時間、傳輸速度、安全性。
12、進一步地,所述綜合情況包括數(shù)據(jù)交換路徑的實時負載、歷史性能、安全性指標以及預(yù)估時效性,所述預(yù)估時效性是指每條數(shù)據(jù)交換路徑的總用時、每個傳輸節(jié)點的分別用時和傳輸成功率。
13、進一步地,在步驟s200中,建立數(shù)據(jù)轉(zhuǎn)碼引擎還包括,建立動態(tài)適應(yīng)模型,用于對未知數(shù)據(jù)類型進行識別,設(shè)置反饋循環(huán),根據(jù)識別結(jié)果設(shè)置轉(zhuǎn)換規(guī)則,并將轉(zhuǎn)換規(guī)則用于更新動態(tài)適應(yīng)模型;進一步分析未知數(shù)據(jù)類型的層次結(jié)構(gòu)、字段類型和關(guān)系,以及重復(fù)模式、序列和關(guān)聯(lián)規(guī)則,并解析數(shù)據(jù)結(jié)構(gòu)內(nèi)容,提取結(jié)構(gòu)關(guān)鍵信息;根據(jù)分析結(jié)果,制定將未知數(shù)據(jù)類型轉(zhuǎn)換為標準格式的規(guī)則;并更新航空數(shù)據(jù)語義網(wǎng)絡(luò)。
14、進一步地,所述動態(tài)適應(yīng)模型是以隨機森林算法為基礎(chǔ)算法進行構(gòu)建,所述解析數(shù)據(jù)結(jié)構(gòu)內(nèi)容是應(yīng)用自然語言處理技術(shù)進行解析,并提取結(jié)構(gòu)關(guān)鍵信息;所述更新航空數(shù)據(jù)語義網(wǎng)絡(luò)是將未知數(shù)據(jù)類型的信息整合到航空數(shù)據(jù)語義網(wǎng)絡(luò)中,具體步驟如下:使用資源描述框架表示新數(shù)據(jù)類型的信息,構(gòu)建rdf三元組,描述數(shù)據(jù)中的實體、屬性和關(guān)系;將rdf信息添加到航空數(shù)據(jù)語義網(wǎng)絡(luò)中,更新網(wǎng)絡(luò)中的本體和詞匯表,以包含新數(shù)據(jù)類型的相關(guān)概念;使用語義推理工具檢查更新后的語義網(wǎng)絡(luò)的一致性。
15、本申請中提供的一個或多個技術(shù)方案,至少具有如下技術(shù)效果或優(yōu)點:
16、通過智能路由模型選擇常見且高效的數(shù)據(jù)交換路徑,減少了數(shù)據(jù)傳輸?shù)难舆t和錯誤率,實現(xiàn)了提高整體的數(shù)據(jù)交換效率的效果;建立自動補正機制實現(xiàn)地址驗證和補全,確保地址信息的準確性和完整性,實現(xiàn)了快速解決基礎(chǔ)信息問題、提高數(shù)據(jù)處理效率的效果;建立數(shù)據(jù)轉(zhuǎn)碼引擎并使用航空語義網(wǎng)技術(shù)對數(shù)據(jù)進行標準化處理,使得不同格式的數(shù)據(jù)能夠互操作,實現(xiàn)了提高數(shù)據(jù)可用性和價值的效果。
1.一種民航物流數(shù)據(jù)交換方法,其特征在于,所述方法包括:
2.如權(quán)利要求1所述的一種民航物流數(shù)據(jù)交換方法,其特征在于,所述待交換數(shù)據(jù)信息包括數(shù)據(jù)類型、來源以及數(shù)據(jù)交換需求,所述數(shù)據(jù)交換需求是指需要轉(zhuǎn)換的數(shù)據(jù)格式、接收方信息以及數(shù)據(jù)傳輸條件,所述來源是指上傳方和接收方的地址信息;所述數(shù)據(jù)交換路徑是指數(shù)據(jù)從起始點到目標點所經(jīng)過的所有傳輸節(jié)點和連接的序列,所述傳輸節(jié)點是指在所述數(shù)據(jù)交換路徑中的每個實體;所述預(yù)處理數(shù)據(jù)集包括補全后的待交換數(shù)據(jù)信息、數(shù)據(jù)交換路徑和理想交換區(qū);所述歷史信任鏈是通過企業(yè)信任鏈數(shù)據(jù)庫和信任鏈評估模塊分析得到。
3.如權(quán)利要求2所述的一種民航物流數(shù)據(jù)交換方法,其特征在于,所述企業(yè)信任鏈數(shù)據(jù)庫包括每家企業(yè)的歷史發(fā)送數(shù)據(jù)、接收方反饋數(shù)據(jù)以及數(shù)據(jù)質(zhì)量評估數(shù)據(jù);所述信任鏈評估模塊是根據(jù)歷史數(shù)據(jù)傳輸評估效果對每條所述數(shù)據(jù)交換路徑進行信任度評分,選取信任度評分最高的數(shù)據(jù)交換路徑作為歷史信任鏈。
4.如權(quán)利要求1所述的一種民航物流數(shù)據(jù)交換方法,其特征在于,所述自動補正機制包括地址驗證和地址補全,所述地址驗證是根據(jù)所有已知的有效地址驗證所述待交換數(shù)據(jù)信息中的地址信息,并返回結(jié)果;所述地址補全是對于有效但部分內(nèi)容不完整的地址信息,通過填補方法進行補全,并對補全后的地址進行二次驗證。
5.如權(quán)利要求1所述的一種民航物流數(shù)據(jù)交換方法,其特征在于,所述智能路由模型是以常見交換路徑作為基礎(chǔ)數(shù)據(jù),使用深度神經(jīng)網(wǎng)絡(luò)作為基礎(chǔ)模型進行訓練;其中,從歷史數(shù)據(jù)交換記錄中收集所有已完成的數(shù)據(jù)交換路徑信息,對于收集到的每條數(shù)據(jù)交換路徑,統(tǒng)計出現(xiàn)頻數(shù);預(yù)先設(shè)定頻率基數(shù)和頻繁度閾值,所述頻繁度閾值是所述頻率基數(shù)與數(shù)據(jù)交換路徑總數(shù)量的乘積;將出現(xiàn)頻數(shù)超過所述頻繁度閾值的路徑視為常見交換路徑。
6.如權(quán)利要求1所述的一種民航物流數(shù)據(jù)交換方法,其特征在于,所在步驟s100中,選擇數(shù)據(jù)交換路徑,還包括:根據(jù)歷史信任鏈為基礎(chǔ)數(shù)據(jù),建立數(shù)據(jù)源檔案庫,結(jié)合當前待交換數(shù)據(jù)信息,實時評估數(shù)據(jù)源檔案庫中各數(shù)據(jù)交換路徑的綜合情況,同時根據(jù)企業(yè)的歷史數(shù)據(jù)交換路徑和需求特性,生成交換路徑優(yōu)先隊列,建立路徑?jīng)_突檢測機制,實時監(jiān)控各路徑的使用情況,動態(tài)調(diào)整數(shù)據(jù)交換任務(wù)。
7.如權(quán)利要求6所述的一種民航物流數(shù)據(jù)交換方法,其特征在于,所述數(shù)據(jù)源檔案庫是以企業(yè)為起始點,以歷史數(shù)據(jù)交換路徑為發(fā)展線,記錄每個企業(yè)歷史數(shù)據(jù)交換路徑、交換區(qū)、歷史傳輸節(jié)點以及相關(guān)的性能指標,所述性能指標包括使用時間、傳輸速度、安全性。
8.如權(quán)利要求6所述的一種民航物流數(shù)據(jù)交換方法,其特征在于,所述綜合情況包括數(shù)據(jù)交換路徑的實時負載、歷史性能、安全性指標以及預(yù)估時效性,所述預(yù)估時效性是指每條數(shù)據(jù)交換路徑的總用時、每個傳輸節(jié)點的分別用時和傳輸成功率。
9.如權(quán)利要求1所述的一種民航物流數(shù)據(jù)交換方法,其特征在于,在步驟s200中,建立數(shù)據(jù)轉(zhuǎn)碼引擎還包括,建立動態(tài)適應(yīng)模型,用于對未知數(shù)據(jù)類型進行識別,設(shè)置反饋循環(huán),根據(jù)識別結(jié)果設(shè)置轉(zhuǎn)換規(guī)則,并將轉(zhuǎn)換規(guī)則用于更新動態(tài)適應(yīng)模型;進一步分析未知數(shù)據(jù)類型的層次結(jié)構(gòu)、字段類型和關(guān)系,以及重復(fù)模式、序列和關(guān)聯(lián)規(guī)則,并解析數(shù)據(jù)結(jié)構(gòu)內(nèi)容,提取結(jié)構(gòu)關(guān)鍵信息;根據(jù)分析結(jié)果,制定將未知數(shù)據(jù)類型轉(zhuǎn)換為標準格式的規(guī)則;并更新航空數(shù)據(jù)語義網(wǎng)絡(luò)。
10.如權(quán)利要求9所述的一種民航物流數(shù)據(jù)交換方法,其特征在于,所述動態(tài)適應(yīng)模型是以隨機森林算法為基礎(chǔ)算法進行構(gòu)建,所述解析數(shù)據(jù)結(jié)構(gòu)內(nèi)容是應(yīng)用自然語言處理技術(shù)進行解析,并提取結(jié)構(gòu)關(guān)鍵信息;所述更新航空數(shù)據(jù)語義網(wǎng)絡(luò)是將未知數(shù)據(jù)類型的信息整合到航空數(shù)據(jù)語義網(wǎng)絡(luò)中,具體步驟如下:使用資源描述框架表示新數(shù)據(jù)類型的信息,構(gòu)建rdf三元組,描述數(shù)據(jù)中的實體、屬性和關(guān)系;將rdf信息添加到航空數(shù)據(jù)語義網(wǎng)絡(luò)中,更新網(wǎng)絡(luò)中的本體和詞匯表,以包含新數(shù)據(jù)類型的相關(guān)概念;使用語義推理工具檢查更新后的語義網(wǎng)絡(luò)的一致性。