這篇文章將為大家詳細(xì)講解有關(guān)Hadoop命令怎么用,小編覺得挺實(shí)用的,因此分享給大家做個(gè)參考,希望大家閱讀完這篇文章后可以有所收獲。
成都網(wǎng)絡(luò)公司-成都網(wǎng)站建設(shè)公司成都創(chuàng)新互聯(lián)公司10多年經(jīng)驗(yàn)成就非凡,專業(yè)從事成都網(wǎng)站設(shè)計(jì)、做網(wǎng)站,成都網(wǎng)頁設(shè)計(jì),成都網(wǎng)頁制作,軟文發(fā)布平臺(tái),一元廣告等。10多年來已成功提供全面的成都網(wǎng)站建設(shè)方案,打造行業(yè)特色的成都網(wǎng)站建設(shè)案例,建站熱線:18982081108,我們期待您的來電!
用法:
hadoop [--config confdir] [--loglevel loglevel] [COMMAND] [GENERIC_OPTIONS]
[COMMAND_OPTIONS]
字段 | 描述 |
--config confdir | 覆蓋默認(rèn)配置目錄。默認(rèn)目錄是${HADOOP_HOME}/conf |
--loglevel loglevel | 覆蓋日志級(jí)別。有效值:FATAL、ERROR、WARN、INFO、DEBUG和TRACE。默認(rèn)為INFO。 |
GENERIC_OPTIONS | 支持多個(gè)命令的options集合 |
COMMAND_OPTIONS | Hadoop子項(xiàng)目的各種命令的options集合 |
Generic Options
GENERIC_OPTIONS | 描述 |
-archives | Specify comma separated archives to be unarchived on the compute machines. Applies only to job. |
-conf | 指定一個(gè)應(yīng)用程序的配置文件 |
-D = | 使用指定屬性值 |
-files | 指定逗號(hào)分隔的文件列表復(fù)制到MapReduce集群。只應(yīng)用于任務(wù)。 |
-jt or | 指定ResourceManager。只應(yīng)用于任務(wù)。 |
-libjars | 指定逗號(hào)分隔的jar文件包括在classpath中。應(yīng)用于任務(wù)。 |
所有這些命令從hadoop shell command執(zhí)行。它們被分為用戶命令和管理員命令。
Hadoop集群用戶使用的命令。
archive
創(chuàng)建hadoop歸檔。
checknative
用法:hadoop checknative [-a] [-h]
COMMAND_OPTION | 描述 |
-a | 檢測(cè)所有類庫是否可用 |
-h | 打印幫助 |
該命令檢測(cè)Hadoop本地代碼有效性。默認(rèn),該命令只檢測(cè)libhadoop有效性。
classpath
用法:
用法:hadoop classpath [--glob |--jar <path> |-h |--help]
COMMAND_OPTION | 描述 |
--glob | 執(zhí)行通配符 |
--jar | 指定jar名稱 |
-h |--help | 打印幫助 |
打印需要獲取的Hadoop jar和必須類庫的classpath。如果沒有參數(shù),那么打印整個(gè)
classpath。額外選項(xiàng)打印通配符擴(kuò)展后面的classpath或?qū)慶lasspath到j(luò)ar文件的清單文件
中。
credential
用法:
hadoop credential <subcommand> [options]
COMMAND_OPTION | 描述 |
create alias [-provider provider-path] | 提示用戶證書存儲(chǔ)為指定別名。core-site.xml文件中的 hadoop.security.credential.provider.path將被使用除非提供-provider參數(shù)。 |
delete alias [-provider provider-path] [-f] | 使用指定別名刪除證書。core-site.xml文件中的 hadoop.security.credential.provider.path 將被使用,除非指定-provider。指定-f選項(xiàng)系統(tǒng)會(huì)詢問你是否確認(rèn)執(zhí)行命令。 |
list [-provider provider-path] | 列出所有的證書別名。core-site.xml的 hadoop.security.credential.provider.path 將被使用,除非指定-provider。 |
命令管理在證書提供商中管理證書、密碼和秘鑰。
Hadoop的CredentialProvider API允許將應(yīng)用程序和它們需要的密碼/秘鑰分開存儲(chǔ)。為了指定
特殊提供商的類型和位置,用戶必須在core-site.xml文件中設(shè)置
hadoop.security.credential.provider.path配置元素或使用命令行選項(xiàng)-provider。該提供商
路徑是一個(gè)逗號(hào)分隔的表示提供商類型和位置的URL列表。例如:
user:///,jceks://file/tmp/test.jceks,jceks://hdfs@nn1.example.com/my/path
/test.jceks
表示當(dāng)前用戶的證書文件通過User Provider獲取,本地文件系統(tǒng)位于/tmp/test.jceks是Java
Keystore Provider,HDFS文件系統(tǒng)中的nn1.example.com/my/path/test.jceks也是Java
Keystore Provider。
當(dāng)利用證書命令,它將提供密碼或秘鑰給特定證書存儲(chǔ)提供商。為了明確指定提供商存儲(chǔ)位置
使用-provider選項(xiàng)。否則,指定多個(gè)提供商,第一個(gè)非瞬時(shí)的提供商被使用。
例子:
hadoop credential list -provider jceks://file/tmp/test.jceks
distcp
遞歸復(fù)制文件和目錄。
fs
等價(jià)于HDFS中的hdfs dfs命令。
jar
用法:
hadoop jar <jar> [mainClass] args...
運(yùn)行jar文件。
使用yarn jar加載YARN應(yīng)用程序。
key
通過KeyProvider管理鍵。
trace
瀏覽和修改Hadoop追蹤設(shè)置。
version
用法:
hadoop version
打印版本。
classname
用法:
hadoop CLASSNAME
運(yùn)行類名CLASSNAME的類。
Hadoop集群管理員使用的命令。
daemonlog
用法:
hadoop daemonlog -getlevel <host:httpport> <classname>
hadoop daemonlog -setlevel <host:httpport> <classname> <level>
COMMAND_OPTION | 描述 |
-getlevel | 打印運(yùn)行在后臺(tái)host:httpport以完全限定類名定義的日志的級(jí)別。該命令內(nèi)部鏈接http:///logLevel?log= |
-setlevel | 設(shè)置運(yùn)行在后臺(tái)host:httpport以完全限定類名定義的日志的級(jí)別。該命令內(nèi)部鏈接http:///logLevel?log=&level= |
關(guān)于“Hadoop命令怎么用”這篇文章就分享到這里了,希望以上內(nèi)容可以對(duì)大家有一定的幫助,使各位可以學(xué)到更多知識(shí),如果覺得文章不錯(cuò),請(qǐng)把它分享出去讓更多的人看到。
本文題目:Hadoop命令怎么用
文章起源:http://www.chinadenli.net/article34/iigipe.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供小程序開發(fā)、網(wǎng)站策劃、網(wǎng)站制作、域名注冊(cè)、網(wǎng)站設(shè)計(jì)、網(wǎng)頁設(shè)計(jì)公司
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)
移動(dòng)網(wǎng)站建設(shè)知識(shí)