Spark1.4源碼走讀筆記之模式匹配-創(chuàng)新互聯(lián)

RDD里的模式匹配:

創(chuàng)新互聯(lián)公司是一家專業(yè)的成都網(wǎng)站建設(shè)公司,我們專注網(wǎng)站設(shè)計制作、網(wǎng)站制作、網(wǎng)絡(luò)營銷、企業(yè)網(wǎng)站建設(shè),賣友情鏈接,一元廣告為企業(yè)客戶提供一站式建站解決方案,能帶給客戶新的互聯(lián)網(wǎng)理念。從網(wǎng)站結(jié)構(gòu)的規(guī)劃UI設(shè)計到用戶體驗提高,創(chuàng)新互聯(lián)力求做到盡善盡美。

def hasNext: Boolean = (thisIter.hasNext, otherIter.hasNext) match {

     case (true, true) => true

     case (false, false) => false

     case _ => throw new SparkException("Can only zip RDDs with " +

      "same number of elements in each partition")

    }

jobResult = jobResult match {

     case Some(value) => Some(f(value, taskResult.get))

     case None => taskResult

    }

  take(1) match {

   case Array(t) => t

   case _ => throw new UnsupportedOperationException("empty collection")

  }

下面的比較好理解:

val len = rdd.dependencies.length

   len match {

    case 0 => Seq.empty

    case 1 =>

     val d = rdd.dependencies.head

     debugString(d.rdd, prefix, d.isInstanceOf[ShuffleDependency[_, _, _]], true)

    case _ => //所有的都到碗里來

     val frontDeps = rdd.dependencies.take(len - 1)

     val frontDepStrings = frontDeps.flatMap(

      d => debugString(d.rdd, prefix, d.isInstanceOf[ShuffleDependency[_, _, _]]))

     val lastDep = rdd.dependencies.last

     val lastDepStrings =

      debugString(lastDep.rdd, prefix, lastDep.isInstanceOf[ShuffleDependency[_, _, _]], true)

     (frontDepStrings ++ lastDepStrings)

   }

另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)scvps.cn,海內(nèi)外云服務(wù)器15元起步,三天無理由+7*72小時售后在線,公司持有idc許可證,提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國服務(wù)器、虛擬主機、免備案服務(wù)器”等云主機租用服務(wù)以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡單易用、服務(wù)可用性高、性價比高”等特點與優(yōu)勢,專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應(yīng)用場景需求。

當前文章:Spark1.4源碼走讀筆記之模式匹配-創(chuàng)新互聯(lián)
地址分享:http://muchs.cn/article42/iohhc.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供全網(wǎng)營銷推廣、外貿(mào)網(wǎng)站建設(shè)定制網(wǎng)站、App開發(fā)Google、App設(shè)計

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)

成都定制網(wǎng)站網(wǎng)頁設(shè)計