MapReduce的數(shù)據(jù)放置策略
推薦 + 挑錯(cuò) + 收藏(0) + 用戶(hù)評(píng)論(0)
MapReduce是一種適用于大規(guī)模數(shù)據(jù)密集型應(yīng)用的有效編程模型,具有編程簡(jiǎn)單、易于擴(kuò)展、容錯(cuò)性好等特點(diǎn),已在并行和分布式計(jì)算領(lǐng)域得到了廣泛且成功的應(yīng)用.由于MapReduce將計(jì)算擴(kuò)展到大規(guī)模的機(jī)器集群上,處理數(shù)據(jù)的合理放置成為影響MapReduce集群系統(tǒng)性能(包括能耗、資源利用率、通信和I/O代價(jià)、響應(yīng)時(shí)間、系統(tǒng)的可靠性和吞吐率等)的關(guān)鍵因素之一.首先對(duì)MapReduce編程模型的典型實(shí)現(xiàn)-Hadoop缺省的數(shù)據(jù)放置策略進(jìn)行分析,并進(jìn)一步討論了MapReduce框架下,設(shè)計(jì)數(shù)據(jù)放置策略時(shí)需考慮的關(guān)鍵問(wèn)題和衡量數(shù)據(jù)放置策略的標(biāo)準(zhǔn);其次,對(duì)目前MapReduce集群環(huán)境下的數(shù)據(jù)放置策略?xún)?yōu)化方法的研究與進(jìn)展進(jìn)行了綜述和分析;最后,分析和歸納了MapReduce集群環(huán)境下數(shù)據(jù)放置策略的下一步研究工作。
非常好我支持^.^
(0) 0%
不好我反對(duì)
(0) 0%
下載地址
MapReduce的數(shù)據(jù)放置策略下載
相關(guān)電子資料下載
- MapReduce和Spark概要介紹 1297
- Apache Storm的安裝部署 777
- 谷歌大腦和DeepMind聯(lián)合發(fā)布堪稱(chēng)AI界的MapReduce 4342
- MapReduce實(shí)現(xiàn)與自定義詞典文件基于hanLP的中文分詞詳解 221
- 一種基于MapReduce模型的并行化k-medoids聚類(lèi)算法 5078
- mapreduce二次排序_ mapreduce二次排序原理 6146
- mapreduce工作原理圖文詳解_Map、Reduce任務(wù)中Shuffle和排序 8344
- mapreduce設(shè)置map個(gè)數(shù)_mapreduce設(shè)置map內(nèi)存 11204
- Mapreduce和Hive中map reduce個(gè)數(shù)設(shè)定 5977
- mapreduce的應(yīng)用開(kāi)發(fā)步驟 4716