大數據學習實踐總結(2)--環(huán)境搭建，JAVA引導，HADOOP搭建-創(chuàng)新互聯

PS:后續(xù)的文章會把我實踐的內容分解成為一個個的小模塊，方便大家的學習，交流。文未我也會附上相關的代碼。一起加油！   學有三年的大數據原理，一直沒有實踐過。最近準備離職，正好把自己所學的大數據內容全部實踐一下，也不至于只會純理論。面對實踐，首先要有空杯心態(tài)，倒空自己之后，才能學到更多，加油！也希望大家多關注，以后會更多注重實踐跟原理的結合。

環(huán)境搭建

創(chuàng)新互聯從2013年開始，是專業(yè)互聯網技術服務公司，擁有項目網站設計制作、成都做網站網站策劃，項目實施與項目整合能力。我們以讓每一個夢想脫穎而出為使命，1280元株洲做網站,已為上家服務,為株洲各地企業(yè)和個人服務,聯系電話:13518219792

  對于大數據，重點在于Hadoop的底層架構。雖說現在spark架構用的還是比較多。但hadoop還是基礎。還有就是為什么要以Linux為基礎，主要是因為現行網站大部分服務端都是在linux系統(tǒng)中。這一點，個人感覺還是在文件讀取及數據調用這方面有很多優(yōu)點。而linux的開源，又方便了大多數編程人員對于系統(tǒng)的理解。而裝有l(wèi)inux又對Python編程有很大幫助。至于坊間流傳的：人生苦短，你要用Python.個人的理解的，用Python編程起來會非常簡單。而且只要是裝有Linux系統(tǒng)就可以。

  對于環(huán)境搭建這一部分，操作過程中。大的困難就是在于NAT的設置，對于這一步，沒有按照視頻內容一步步來操作。在為我是用無線來操作的，而大部分個人PC在無線鏈接后獲取到的IP都是192.168網段，當虛擬機要跟主機以NAT方式來進行通信時，就要設置在不同網段內，而我個人是將虛擬機的改為172.20的這一網段。不至于影響到后續(xù)操作。

JAVA引導

  對于這一部分，由于前期在R原理課時，學過這一塊的相關設置環(huán)境變量。再在虛機的linux上進行相關設置就能夠深入明白其原理。并將原來引導都指向相關路徑。

  這一部分主要的難點就是vim編輯器的理解，相關命令的解釋。當時大的困惑就是在打開一個文件后，如何編輯，如何保存退出。后來通過查找百度，看一些技術貼子之后才逐步明白vim編輯器的用法。還有就是對于原理的理解，還有就是英語要好，遇到報錯之后，要知道從×××解決的辦法，并實踐執(zhí)行。在一個地方卡住，一定要在一天內解決，要不然對人的學習積極性打擊很大。

Hadoop搭建

  這一部分，vim命令是最多的。也即在hadoop-1.2.1下如何設置相關的參數，最后datanode,jobtrack,tasktrack,namenode這些關鍵進程是否起來。而這一部分，是自己在格式化namenode后，多次進行開啟服務才起來的。這一塊可能涉及到三臺虛機的互聯以及相互傳遞參數。所以這一塊是最慢的。 還有一個難點，就是你的虛機上若是沒有公鑰文件（我的就沒有）。這就需要用touch 來建立，而在檢測用戶權限的時候，又要用到chmod命令。總之，這一部分內容是綜上有點難度的，需要你能綜合寫vim命令，同時對hadoop的相關進程有所了解。

總結

 現在就差Python的命令了，就覺得，理論跟實踐真的很不一樣，不斷的學習過程中，不光要克服代碼上的天生缺陷，也要對內核原理有更深入的理解。好在已經養(yǎng)成的好習慣，會把工作中的操作都一一記錄下來。便于后續(xù)學習跟理解。也歡迎大家一起來討論。

另外有需要云服務器可以了解下創(chuàng)新互聯scvps.cn，海內外云服務器15元起步，三天無理由+7*72小時售后在線，公司持有idc許可證，提供“云服務器、裸金屬服務器、高防服務器、香港服務器、美國服務器、虛擬主機、免備案服務器”等云主機租用服務以及企業(yè)上云的綜合解決方案，具有“安全穩(wěn)定、簡單易用、服務可用性高、性價比高”等特點與優(yōu)勢，專為企業(yè)上云打造定制，能夠滿足用戶豐富、多元化的應用場景需求。

當前文章：大數據學習實踐總結(2)--環(huán)境搭建，JAVA引導，HADOOP搭建-創(chuàng)新互聯
當前網址：http://muchs.cn/article38/heipp.html

成都網站建設公司_創(chuàng)新互聯，為您提供動態(tài)網站、網站維護、網站內鏈、品牌網站制作、網站導航、小程序開發(fā)

廣告

聲明：本網站發(fā)布的內容（圖片、視頻和文字）以用戶投稿、用戶轉載內容為主，如果涉及侵權請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網站立場，如需處理請聯系客服。電話：028-86922220；郵箱：631063699@qq.com。內容未經允許不得轉載，或轉載時需注明來源： 創(chuàng)新互聯