摘要：本申請(qǐng)?zhí)峁┝艘环NHadoop平臺(tái)下的數(shù)據(jù)處理方法，屬于數(shù)據(jù)處理領(lǐng)域，包括：獲取Hadoop平臺(tái)存量數(shù)據(jù)的Hive表結(jié)構(gòu)信息，將待存儲(chǔ)數(shù)據(jù)的結(jié)構(gòu)信息與所述Hive表結(jié)構(gòu)信息進(jìn)行比較，獲得數(shù)據(jù)結(jié)構(gòu)變化信息；根據(jù)獲得的所述數(shù)據(jù)結(jié)構(gòu)變化信息和獲取的所述存量數(shù)據(jù)的Hive表結(jié)構(gòu)信息，更新Hive表結(jié)構(gòu)；按照更新后的Hive表結(jié)構(gòu)格式化所述待存儲(chǔ)數(shù)據(jù)，并存儲(chǔ)格式化后的所述待存儲(chǔ)數(shù)據(jù)。采用本申請(qǐng)公開(kāi)的方法，有效地保證了存儲(chǔ)數(shù)據(jù)的數(shù)據(jù)結(jié)構(gòu)的兼容性，在需要對(duì)歸檔存儲(chǔ)的數(shù)據(jù)進(jìn)行分析和查詢(xún)時(shí)，不需要對(duì)數(shù)據(jù)格式進(jìn)行統(tǒng)計(jì)和轉(zhuǎn)換，不僅節(jié)省了計(jì)算資源，還可以快速反饋分析、查詢(xún)結(jié)果，提高數(shù)據(jù)查詢(xún)和分析效率。
- 專(zhuān)利類(lèi)型發(fā)明專(zhuān)利
- 申請(qǐng)人北京先進(jìn)數(shù)通信息技術(shù)股份公司;
- 發(fā)明人朱大勇;完獻(xiàn)忠;滕一勤;
- 地址100089 北京市海淀區(qū)車(chē)道溝1號(hào)濱河大廈D座六層
- 申請(qǐng)?zhí)?/b>CN201510892226.1
- 申請(qǐng)時(shí)間2015年12月07日
- 申請(qǐng)公布號(hào)CN105447172A
- 申請(qǐng)公布時(shí)間2016年03月30日
- 分類(lèi)號(hào)G06F17/30(2006.01)I;
教育裝備采購(gòu)網(wǎng)企業(yè)微信客服
京公網(wǎng)安備11010802043465號(hào)
