本篇內(nèi)容介紹了“hadoop分布式文件系統(tǒng)怎么導入和導出數(shù)據(jù)”的有關(guān)知識，在實際案例的操作過程中，不少人都會遇到這樣的困境，接下來就讓小編帶領(lǐng)大家學習一下如何處理這些情況吧！希望大家仔細閱讀，能夠?qū)W有所成！

公司主營業(yè)務：成都網(wǎng)站設計、做網(wǎng)站、移動網(wǎng)站開發(fā)等業(yè)務。幫助企業(yè)客戶真正實現(xiàn)互聯(lián)網(wǎng)宣傳，提高企業(yè)的競爭能力。創(chuàng)新互聯(lián)是一支青春激揚、勤奮敬業(yè)、活力青春激揚、勤奮敬業(yè)、活力澎湃、和諧高效的團隊。公司秉承以“開放、自由、嚴謹、自律”為核心的企業(yè)文化，感謝他們對我們的高要求，感謝他們從不同領(lǐng)域給我們帶來的挑戰(zhàn)，讓我們激情的團隊有機會用頭腦與智慧不斷的給客戶帶來驚喜。創(chuàng)新互聯(lián)推出溫縣免費做網(wǎng)站回饋大家。

要求

weblog_20140319.txt文件從本地文件系統(tǒng)復制到HDFS得一個指定文件夾下

操作步驟

1.在HDFS中創(chuàng)建一個存放目標文件的文件夾：hadoop fs -mkdir /data/weblogs.

2.將目標文件從本地系統(tǒng)復制到剛才新建的文件夾下：hadoop fs -copyFromLocal weblog_20140319.txt /data/weblogs

3.列出HDFS上weblog_20140319.txt文件的信息：hadoop fs -ls /data/weblogs/weblog_20140319.txt

4.將HDFS上的weblog_20140319.txt復制到本地系統(tǒng)的當前文件夾下：hadoop fs -copyToLocal /data/weblogs/weblog_20140319.txt ./weblog_20140319.txt

在Hadoop上處理的一些結(jié)果數(shù)據(jù)可能直接被外部系統(tǒng)使用，也可能需要其他系統(tǒng)進一步處理，或者MapReduce框架根本不符合應用場景，任何類似的情形都需要從HDFS上導出數(shù)據(jù)，下載數(shù)據(jù)最簡單的方式就是Hadoop Shell.

從HDFS復制文件到本地系統(tǒng)時，需注意： 1.具有足夠的可用空間 2.網(wǎng)絡連接速度（HDFS中的文件大小在幾個TB到幾十個TB非常常見的，在1Gbit網(wǎng)絡環(huán)境下，從HDFS中導出10TB數(shù)據(jù)到本地文件系統(tǒng)，最好也要消耗23個小時，當然前提還是具有足夠的可用空間）

“hadoop分布式文件系統(tǒng)怎么導入和導出數(shù)據(jù)”的內(nèi)容就介紹到這里了，感謝大家的閱讀。如果想了解更多行業(yè)相關(guān)的知識可以關(guān)注創(chuàng)新互聯(lián)網(wǎng)站，小編將為大家輸出更多高質(zhì)量的實用文章！

新聞標題：hadoop分布式文件系統(tǒng)怎么導入和導出數(shù)據(jù)
網(wǎng)站鏈接：http://www.chinadenli.net/article4/iphsoe.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián)，為您提供用戶體驗、外貿(mào)網(wǎng)站建設、商城網(wǎng)站、企業(yè)網(wǎng)站制作、電子商務、面包屑導航

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時需注明來源： 創(chuàng)新互聯(lián)