linux下hadoop集群常用命令有哪些

發布時間：2020-05-25 11:23:58 來源：億速云閱讀：721 作者：栢白欄目：建站服務器

linux下hadoop集群常用命令有哪些？Hadoop是一個由Apache基金會所開發的分布式系統基礎架構。用戶可以在不了解分布式底層細節的情況下，開發分布式程序。充分利用集群的威力進行高速運算和存儲。

上傳文件

1）hadoop fs -put words.txt /path/to/input/
2）hdfs dfs -put words.txt /path/wc/input/

查看某目錄下所含文件

1）hadoop fs -ls /path/wc/input/
2）hadoop fs -ls hdfs://node1:9000/path/wc/input/

與linux文件系統中的用法一樣，對文件所屬權限

1）hadoop fs -chmod 666 /hello.txt
2）hadoop fs -chown someuser:somegrp /hello.txt

du統計文件大小

hadoop fs -du -h / # 統計文件夾下每個文件的大小
hadoop fs -du -s -h / #統計這個文件夾總大小，返回的數據是，文件夾大小，備份總大小
hadoop fs -count / # 統計文件數量，返回的數據是目錄個數，文件個數，文件總計大小，輸入路徑

殺死yarn任務

yarn application -kill application_id

查看yarn日志

yarn logs -applicationId application_id > logs.txt

億速云的容器云產品是通過docker技術，在集群服務器上部署容器服務實現，擁有上萬Linux鏡像，功能強大、簡單易用，可輕松構建集群服務。

向AI問一下細節

中文字幕av专区_日韩电影在线播放_精品国产精品久久一区免费式_av在线免费观看网站