没长正的技术专栏 勤动手、多思考

Hadoop之集群使用

2020-01-06

阅读:

2021-04-19

Hadoop集群

Hadoop 基本命令

1. 同linux 类似,是以 hadoop fs 开头

[meizhangzheng@master ~]$ hadoop fs -mkdir /test
		
hadoop fs -touchz /data/tmp/word.txt

2.文件存储路径在hadoop文件系统中

/home/meizhangzheng/dfs/name

3.存储形式

文件并非通过hadoop fs -mkdir 等命令创建的文件及内容信息,而是被分割成二进制存储的

4.查看所有文件

通过命令 hadoop fs -ls -R / 可查看所有文件;

#1.查看hadoop具体操作的文件信息
[meizhangzheng@master ~]$ pwd
/home/meizhangzheng
[meizhangzheng@master ~]$ cd dfs/
[meizhangzheng@master dfs]$ cd name/
[meizhangzheng@master name]$ ll
total 4
drwxrwxr-x 2 meizhangzheng meizhangzheng 209 Jan 11 15:09 current
-rw-r--r-- 1 root          root           12 Jan 11 15:07 in_use.lock
[meizhangzheng@master name]$ cd current/
[meizhangzheng@master current]$ dir
edits_0000000000000000001-0000000000000000002  fsimage_0000000000000000000.md5
edits_inprogress_0000000000000000003	       seen_txid
fsimage_0000000000000000000		       VERSION

5.安全模式

dfsadmin: 安全模式、启动hadoop时先通过加载日志文件…

6.为文件夹授予用户组权限

hadoop fs -chown hive:hive /test

Similar Posts

欢迎拍砖,多多交流,转载请注明出处:[没长正的技术专栏](http://blog.meizhangzheng.com) 如涉及侵权问题,请发送邮件到xsj34567@163.com,如情况属实本人将会尽快删除。


Comments