Mapreduce中怎么設置Map的數(shù)量

這篇文章將為大家詳細講解有關Mapreduce中怎么設置Map的數(shù)量，文章內容質量較高，因此小編分享給大家做個參考，希望大家閱讀完這篇文章后對相關知識有一定的了解。

讓客戶滿意是我們工作的目標，不斷超越客戶的期望值來自于我們對這個行業(yè)的熱愛。我們立志把好的技術通過有效、簡單的方式提供給客戶，將通過不懈努力成為客戶在信息化領域值得信任、有價值的長期合作伙伴，公司提供的服務項目有：域名申請、網(wǎng)絡空間、營銷軟件、網(wǎng)站建設、勐海網(wǎng)站維護、網(wǎng)站推廣。

描述如下：

    在新版MapReduce 中即 MR on yarn中，不支持設置Map數(shù)量。

    Map的數(shù)量是由MinInputSplitSize決定的，公式：

    Map的數(shù)量 = TotalSize / MinInputSplitSize

    要想控制Map的數(shù)量，可以通過控制MinInputSplitSize大小來控制Map數(shù)量。

        如果設置的MinInputSplitSize大于BlockSize，MinInputSplitSize即為設置的值； 反之設置的MinInputSplitSize小于BlockSize，MinInputSplitSize的值會置為BlockSize。

        如果保持默認設置的話，MinInputSplitSize則為BlockSize，

關于Mapreduce中怎么設置Map的數(shù)量就分享到這里了，希望以上內容可以對大家有一定的幫助，可以學到更多知識。如果覺得文章不錯，可以把它分享出去讓更多的人看到。

網(wǎng)頁名稱：Mapreduce中怎么設置Map的數(shù)量
標題鏈接：http://www.muchs.cn/article6/jpceog.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián)，為您提供網(wǎng)頁設計公司、關鍵詞優(yōu)化、電子商務、外貿(mào)網(wǎng)站建設、品牌網(wǎng)站建設、建站公司

廣告

聲明：本網(wǎng)站發(fā)布的內容（圖片、視頻和文字）以用戶投稿、用戶轉載內容為主，如果涉及侵權請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內容未經(jīng)允許不得轉載，或轉載時需注明來源： 創(chuàng)新互聯(lián)