开发笔记:HDFS权限管理

# bd101 如果服务已启动，先停止服务 ZK集群不需要停止stop-dfs.sh

# bd101~bd104useradd bduserpasswd bduser

# bd101~bd104# 安装部署程序路径chown -R bduser /opt/bigdata/hadoop-2.10.1/# 数据存储路径chown -R bduser /var/bigdata/hadoop/

# bd101~bd104# 切换用户到 bdusersu bduser# 创建 .ssh目录cd ssh localhost

# bd101~bd102# 生成密钥cd /home/bduser/.sshssh-keygen -t dsa -P '' -f  ./id_dsa# 分发公钥ssh-copy-id -i id_dsa bd101ssh-copy-id -i id_dsa bd102ssh-copy-id -i id_dsa bd103ssh-copy-id -i id_dsa bd104# 在bd104查看公钥cat /home/bduser/.ssh/authorized_keys

# bd101cd /opt/bigdata/hadoop-2.10.1/etc/hadoop/vim hdfs-site.xml dfs.ha.fencing.ssh.private-key-files /home/bduser/.ssh/id_dsa# 分发配置scp hdfs-site.xml bd102:`pwd`scp hdfs-site.xml bd103:`pwd`scp hdfs-site.xml bd104:`pwd`

# bd101start-dfs.sh

# 第一步：在bd101 用户roothdfs dfs -mkdir  -p  /user/root# 第二步：在bd101 用户bduserhdfs dfs -mkdir -p /user/bduserhdfs dfs -mkdir /temp# 第三步：在bd101 用户roothdfs dfs -mkdir /temp/abc

# bduser是超级用户，由bduser启动的NN，不受权限限制# root用户是linux系统的超级用户，在此处是普通用户，受权限限制1.user目录的所有者是root,使用bduser用户可以在user目录下创建文件夹2.temp目录的所有者是bduser，使用root用户在temp目录下创建文件夹失败

# 修改 temp 的用户组为 group01 hdfs dfs -chown bduser:group01  /temp 或者hdfs dfs -chgrp group01 /temp# 修改权限 拥有者跟组用户拥有全部权限hdfs dfs -chmod 770 /temp

# bd101 root用户useradd goodpasswd good# 查看用户id good# 测试用户权限bduser:hdfs dfs -mkdir /temp/bduser 创建成功good:hdfs dfs -mkdir /temp/good 创建失败

# bd101、bd104 root用户# 创建一个组groupadd group01# 给用户good追加一个组usermod -a -G group01 good# 查看good所在组[root@bd101 ~]# id gooduid=1002(good) gid=1002(good) groups=1002(good),1003(group01)# bd101 bduser用户# hdfs已经启动，用户和新加组在通过命令更新到hdfshdfs dfsadmin -refreshUserToGroupsMappings# bd104 good用户hdfs dfs -mkdir /temp/good 创建成功

地址：http://bd101:50070/explorer.html#/由于temp目录权限被修改，访问temp目录被拒绝，可以通过修改temp权限解决，也可以通过以下方法解决

<property>       <name>hadoop.http.staticuser.username>       <value>bduservalue>property>