hadoop 建立使用者及hdfs許可權,hdfs操作等常用shell命令

來源:互聯網
上載者:User
添加一個hadoop組sudo addgroup hadoop

將目前使用者larry加入到hadoop組
sudo usermod -a -G hadoop larry

將hadoop組加入到sudoer
sudo gedit etc/sudoers
在root ALL=(ALL) ALL後 hadoop ALL=(ALL) ALL

修改hadoop目錄的許可權
sudo chown -R larry:hadoop /home/larry/hadoop<所有者:組 檔案>

修改hdfs的許可權
sudo chmod -R 755 /home/larry/hadoop
sudo bin/hadoop dfs -chmod -R 755 /
sudo bin/hadoop dfs -ls /

修改hdfs檔案的所有者
sudo bin/hadoop fs -chown -R larry /

解除hadoop的安全模式
sudo bin/hadoop dfsadmin -safemode leave

拷貝本地檔案到hdfs
hadoop fs -copyFromLocal <localsrc> URI

將路徑指定檔案的內容輸出到stdout
hadoop fs -cat file:///file3 /user/hadoop/file4

改變檔案的所屬組
hadoop fs -chgrp [-R] GROUP URI

改變使用者存取權限
hadoop fs -chmod [-R] 755 URI

修改檔案的所有者
hadoop fs -chown [-R] [OWNER][:[GROUP]] URI [URI ]

拷貝hdfs檔案到本地
hadoop fs -copyToLocal URI localdst

拷貝hdfs檔案到其它目錄
hadoop fs -cp URI [URI …] <dest>

顯示目錄中所有檔案的大小
hadoop fs -du URI [URI …]

合并檔案到本地目錄
hadoop fs -getmerge <src> <localdst> [addnl]

 

相關文章

聯繫我們

該頁面正文內容均來源於網絡整理,並不代表阿里雲官方的觀點,該頁面所提到的產品和服務也與阿里云無關,如果該頁面內容對您造成了困擾,歡迎寫郵件給我們,收到郵件我們將在5個工作日內處理。

如果您發現本社區中有涉嫌抄襲的內容,歡迎發送郵件至: info-contact@alibabacloud.com 進行舉報並提供相關證據,工作人員會在 5 個工作天內聯絡您,一經查實,本站將立刻刪除涉嫌侵權內容。

A Free Trial That Lets You Build Big!

Start building with 50+ products and up to 12 months usage for Elastic Compute Service

  • Sales Support

    1 on 1 presale consultation

  • After-Sales Support

    24/7 Technical Support 6 Free Tickets per Quarter Faster Response

  • Alibaba Cloud offers highly flexible support services tailored to meet your exact needs.