Hive行轉(zhuǎn)列的實現(xiàn)方式

本篇內(nèi)容主要講解“Hive行轉(zhuǎn)列的實現(xiàn)方式”，感興趣的朋友不妨來看看。本文介紹的方法操作簡單快捷，實用性強。下面就讓小編來帶大家學習“Hive行轉(zhuǎn)列的實現(xiàn)方式”吧!

創(chuàng)新互聯(lián)公司專注為客戶提供全方位的互聯(lián)網(wǎng)綜合服務，包含不限于網(wǎng)站建設、網(wǎng)站設計、東洲網(wǎng)絡推廣、小程序開發(fā)、東洲網(wǎng)絡營銷、東洲企業(yè)策劃、東洲品牌公關(guān)、搜索引擎seo、人物專訪、企業(yè)宣傳片、企業(yè)代運營等，從售前售中售后，我們都將竭誠為您服務，您的肯定，是我們最大的嘉獎；創(chuàng)新互聯(lián)公司為所有大學生創(chuàng)業(yè)者提供東洲建站搭建服務，24小時服務熱線：13518219792，官方網(wǎng)址：muchs.cn

前言

傳統(tǒng)關(guān)系型數(shù)據(jù)庫中，無論是Oracle（11g之后）還是SQLserver（2005之后），都自帶了Pivot函數(shù)實現(xiàn)行轉(zhuǎn)列功能，本文主要講述在Hive中實現(xiàn)行轉(zhuǎn)列的兩種方式。

傳統(tǒng)數(shù)據(jù)庫方式

這種方式是借鑒在Oracle或者SQLserver在支持Pivot函數(shù)之前實現(xiàn)行轉(zhuǎn)列的方式，實際上語法沒有什么變化，只是換成了Hive。

with testtable(
select 1 id,'k1' key,123 value
 union all
select 1,'k2' key,124 value
 union all
select 2,'k1',234 value
 )
select id,
      max(case when key='k1' then value else null end) k1,
      max(case when key='k2' then value else null end) k2
 from testtable
group by id

Map方式

這種方式的思路是把需要轉(zhuǎn)列的字段及其值字段拼接成一個Hive上的key-value的map數(shù)據(jù)，具體Sql如下：

with testtable(
select 1 id,'k1' key,123 value
 union all
select 1,'k2' key,124 value
 union all
select 2,'k1',234 value
 )
select id,kv['k1'],kv['k2']
 from (
select id,str_to_map(concat_ws(',', collect_set(concat(key, '-', value))),',','-') kv
 from testtable
group by id)t

總結(jié)

兩種方式都可以實現(xiàn)行轉(zhuǎn)列的功能，傳統(tǒng)的方式易于理解，但在key的取值比較多的時候，寫起來會相當繁瑣，map的方式相對要簡便一些。但map的方式所有的數(shù)據(jù)都collect到一起了，對內(nèi)存的要求會高一些，而傳統(tǒng)的方式通過聚合函數(shù)直接reduce，可以邊運行邊求值。

到此，相信大家對“Hive行轉(zhuǎn)列的實現(xiàn)方式”有了更深的了解，不妨來實際操作一番吧！這里是創(chuàng)新互聯(lián)網(wǎng)站，更多相關(guān)內(nèi)容可以進入相關(guān)頻道進行查詢，關(guān)注我們，繼續(xù)學習！

當前文章：Hive行轉(zhuǎn)列的實現(xiàn)方式
本文鏈接：http://muchs.cn/article6/jcjiog.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián)，為您提供虛擬主機、企業(yè)建站、移動網(wǎng)站建設、云服務器、網(wǎng)站改版、小程序開發(fā)

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時需注明來源： 創(chuàng)新互聯(lián)