一種跨HDFS集群的文件資源分布式高效存儲方法
作者：戴威 國網(wǎng)江蘇省電力有限公司電力科學(xué)研究院; 江蘇南京211103
摘要：針對傳統(tǒng)文件資源存儲方法存在存儲效率低的問題,提出了一種跨HDFS集群的文件資源分布式高效存儲方法。依據(jù)HDFS集群文件資源特征及存儲原理,分析資源分布式存儲的邏輯關(guān)系,保證文件資源存儲環(huán)境安全。依據(jù)標(biāo)準(zhǔn)Hadoop布局方案,保持設(shè)備物理特性,對資源分布進(jìn)行優(yōu)化配置,實(shí)現(xiàn)文件資源存儲自定義功能。通過文件合并、映射計(jì)算元數(shù)據(jù)在名字節(jié)點(diǎn)中內(nèi)存損耗情況,設(shè)計(jì)高效存儲過程,由此完成集群文件資源的分布式高效存儲。在集群環(huán)境拓?fù)浣Y(jié)構(gòu)中進(jìn)行實(shí)驗(yàn)驗(yàn)證,通過實(shí)驗(yàn)結(jié)果可知,該方法存儲效率最高為98%,能夠?yàn)槲募Y源安全存儲提供技術(shù)支持。
注：因版權(quán)方要求，不能公開全文，如需全文，請咨詢雜志社。
電子設(shè)計(jì)工程雜志
電子設(shè)計(jì)工程雜志， 半月刊，本刊重視學(xué)術(shù)導(dǎo)向，堅(jiān)持科學(xué)性、學(xué)術(shù)性、先進(jìn)性、創(chuàng)新性，刊載內(nèi)容涉及的欄目：計(jì)算機(jī)技術(shù)與應(yīng)用、測量與控制、通信與網(wǎng)絡(luò)、電力電子技術(shù)、嵌入式技術(shù)等。于1994年經(jīng)新聞總署批準(zhǔn)的正規(guī)刊物。
- 統(tǒng)計(jì)源期刊
- 1-3個(gè)月審核
