JavaWeb项目架构中的NFS文件服务器实现与优化

NFS简介

NFS(Network File System)即网络文件系统。

主要功能&＃xff1a;通过网络(局域网)让不同的主机系统之间可以共享文件或目录。

主要用途&＃xff1a;NFS网络文件系统一般被用来存储共享视频&＃xff0c;图片&＃xff0c;附件等静态资源文件。

NFS存储服务

无NFS文件共享存储

当用户A通过互联网上传文件时&＃xff0c;经过负载均衡&＃xff0c;随机或者定向分配到某个节点。但是当用户B去下载这个文件的时候&＃xff0c;并不确定会向哪个节点发送请求&＃xff0c;这样会导致用户存在一定几率下载不到的情况。

图片描述

有NFS文件共享存储

当用户A通过互联网上传文件时&＃xff0c;经过负载均衡&＃xff0c;无论发送到哪个节点都会被存储到NFS文件服务器。但是当用户B去下载这个文件的时候&＃xff0c;任何节点都可以读取NFS文件服务器的文件。

图片描述

NFS服务的优缺点

优点

简单容易上手

方便部署非常快速&＃xff0c;维护十分简单

节省本地存储空间将常用的数据存放在一台服务器可以通过网络访问

缺点

在高并发下NFS效率/性能有限

NFS的数据是明文的&＃xff0c;对数据完整性不做验证

多台机器挂载NFS服务器时&＃xff0c;连接管理维护麻烦

容易发生单点故障&＃xff0c;如果服务端宕机&＃xff0c;所有客户端将不能访问

客户端没用用户认证机制&＃xff0c;且数据是通过明文传送&＃xff0c;安全性一般(一般建议在局域网内使用)

RPC工作流程

图片描述

NFS支持的功能非常多&＃xff0c;不同的功能会有不同的服务来完成&＃xff0c;很多服务都需要监听在一些端口&＃xff0c;其中的很多端口并不是固定的。这些服务在启动时&＃xff0c;都需要向rpcbind服务注册一个端口&＃xff0c;rpcbind服务随机选取一个未被使用的端口予以分配。rpcbind服务监听在111端口&＃xff0c;所以rpcbind的主要功能就是指定每个RPC service对应的port number&＃xff0c;并且通知给客户端&＃xff0c;让客户端连接到正确的端口上去。

客户端向NFS服务器端请求的步骤&＃xff1a;

首先用户访问网站程序&＃xff0c;由程序在NFS客户端上发出存取NFS文件的请求&＃xff0c;这是NFS客户端的RPC服务就不通过网络向NFS服务器端的RPC服务的111端口发出NFS文件存取功能的查询请求&＃xff0c;包括要实现的什么功能。

NFS服务器端的RPC服务找到对应的已注册的NFS端口&＃xff0c;通知NFS客户端的RPC服务。

此时NFS客户端获取到正确的端口&＃xff0c;并与NFS联机存取数据。

NFS客户端把数据存取成功后&＃xff0c;返回给客户端程序&＃xff0c;告知用户存取结果。

注意&＃xff1a;由于rpc service在启动时需要向rpcbind注册端口&＃xff0c;所以rpcbind要先启动。另外若rpcbind重新启动&＃xff0c;原来注册的数据也会不见&＃xff0c;因此一但rpcbind重新启动&＃xff0c;让所管理的服务因为需要重新启动以重新向rpcbind注册。

NFS服务器端配置

NFS服务器&＃xff1a;192.168.1.180

检查并安装NFS

[root&＃64;iZ2ze74fkxrls31tr2ia2fZ ~]# rpm -qa rpcbind nfs-utils

nfs-utils-1.3.0-0.48.el7_4.1.x86_64

rpcbind-0.2.0-42.el7.x86_64

如果没有&＃xff0c;安装 NFS 服务器所需的软件包&＃xff0c;实际上需要安装两个包nfs-utils(nfs服务主程序)和rpcbind(rpc主程序), 不过当使用yum安装nfs-utils时会把rpcbind一起安装上。

yum install -y nfs-utils

配置说明

/etc/sysconfig/nfs #NFS的主配置文件

/etc/exports #配置共享目录的文件

/etc/exports的配置格式&＃xff1a;

nfs共享目录 nfs客户端地址1(参1&＃xff0c;参2.....) 客户端地址2(参1&＃xff0c;参2...)

说明&＃xff1a;

nfs共享目录&＃xff1a;为nfs服务器要共享的实际目录&＃xff0c;绝对目录。注意权限问题。

nfs客户端地址&＃xff1a;为nfs服务器授权可以访问的客户端的地址&＃xff0c;可以是单独的ip地址或主机名&＃xff0c;域名。也可以是整个网段。

授权整个网段&＃xff1a;eg&＃xff1a;10.0.0.0/24

文件配置实例说明&＃xff1a;

/data/fileserver 192.168.1.190(rw,sync,no_root_squash)

若服务器端对/etc/exports文件进行了修改&＃xff0c;可以通过exportfs命令重新加载服务而不需要重启服务。若重启服务需要重新向prcbind注册&＃xff0c;而且对客户端的影响也很大&＃xff0c;所以尽量使用exportfs命令来使配置文件生效。

exportfs&＃xff1a;

exportfs -ar #重新导出所有的文件系统

exportfs -r #导出某个文件系统

exportfs -au #关闭导出的所有文件系统

exportfs -u #关闭指定的导出的文件系统

相关参数 (man exports)

A. 选项&＃xff1a;选项用来设置输出目录的访问权限、用户映射等。

设置输出目录只读&＃xff1a;ro

设置输出目录读写&＃xff1a;rw

B. 用户映射选项

all_squash&＃xff1a;将远程访问的所有普通用户及所属组都映射为匿名用户或用户组(nfsnobody)&＃xff1b;

no_all_squash&＃xff1a;与all_squash取反(默认设置)&＃xff1b;

root_squash&＃xff1a;将root用户及所属组都映射为匿名用户或用户组(默认设置)&＃xff1b;

no_root_squash&＃xff1a;与rootsquash取反&＃xff1b;

anonuid&＃61;xxx&＃xff1a;将远程访问的所有用户都映射为匿名用户&＃xff0c;并指定该用户为本地用户(UID&＃61;xxx)&＃xff1b;

anongid&＃61;xxx&＃xff1a;将远程访问的所有用户组都映射为匿名用户组账户&＃xff0c;并指定该匿名用户组账户为本地用户组账户(GID&＃61;xxx)&＃xff1b;

C. 其它选项

secure&＃xff1a;限制客户端只能从小于1024的tcp/ip端口连接nfs服务器(默认设置)&＃xff1b;

insecure&＃xff1a;允许客户端从大于1024的tcp/ip端口连接服务器&＃xff1b;

sync&＃xff1a;将数据同步写入内存缓冲区与磁盘中&＃xff0c;效率低&＃xff0c;但可以保证数据的一致性&＃xff1b;

async&＃xff1a;将数据先保存在内存缓冲区中&＃xff0c;必要时才写入磁盘&＃xff1b;

wdelay&＃xff1a;检查是否有相关的写操作&＃xff0c;如果有则将这些写操作一起执行&＃xff0c;这样可以提高效率(默认设置)&＃xff1b;

no_wdelay&＃xff1a;若有写操作则立即执行&＃xff0c;应与sync配合使用&＃xff1b;

subtree&＃xff1a;若输出目录是一个子目录&＃xff0c;则nfs服务器将检查其父目录的权限(默认设置)&＃xff1b;

no_subtree&＃xff1a;即使输出目录是一个子目录&＃xff0c;nfs服务器也不检查其父目录的权限&＃xff0c;这样可以提高效率&＃xff1b;

启动NFS服务端上nfs服务

1、先为rpcbind和nfs做开机启动&＃xff1a;

systemctl enable rpcbind.service

systemctl enable nfs-server.service

2、然后分别启动rpcbind和nfs服务&＃xff1a;

systemctl start rpcbind.service

systemctl start nfs-server.service

查看服务是否启动

[root&＃64;iZ2ze74fkxrls31tr2ia2fZ ~]# rpcinfo -p

program vers proto port service

100000 4 tcp 111 portmapper

100000 3 tcp 111 portmapper

100000 2 tcp 111 portmapper

100000 4 udp 111 portmapper

100000 3 udp 111 portmapper

100000 2 udp 111 portmapper

100024 1 udp 47426 status

100024 1 tcp 35379 status

100005 1 udp 20048 mountd

100005 1 tcp 20048 mountd

100005 2 udp 20048 mountd

100005 2 tcp 20048 mountd

100005 3 udp 20048 mountd

100005 3 tcp 20048 mountd

100003 3 tcp 2049 nfs

100003 4 tcp 2049 nfs

100227 3 tcp 2049 nfs_acl

100003 3 udp 2049 nfs

100003 4 udp 2049 nfs

100227 3 udp 2049 nfs_acl

100021 1 udp 53046 nlockmgr

100021 3 udp 53046 nlockmgr

100021 4 udp 53046 nlockmgr

100021 1 tcp 38280 nlockmgr

100021 3 tcp 38280 nlockmgr

100021 4 tcp 38280 nlockmgr

使用exportfs查看本机上已经共享的目录&＃xff1a;

exportfs

NFS客户端配置

NFS客户端&＃xff1a;192.168.1.190

安装nfs&＃xff0c;并启动服务。

yum install -y nfs-utils

systemctl enable rpcbind.service

systemctl start rpcbind.service

客户端不需要启动nfs服务&＃xff0c;只需要启动rpcbind服务。

检查 NFS 服务器端是否有目录共享

showmount -e 192.168.1.180

挂载远程服务

mount -t nfs 192.168.1.180:/data/fileserver /data/itstyle

查看挂载

df -h

开机挂载&＃xff0c;编辑/etc/fstab

vim /etc/fstab 加入以下内容&＃xff1a;

# 设备文件 挂载点 文件系统类型 mount参数 dump参数 fsck顺序

192.168.1.180:/data/fileserver /data/itstyle nfs defaults,_netdev 0 0

_netdev明确说明这是网络文件系统&＃xff0c;避免网络启动前挂载出现错误。

保存后&＃xff0c;重新挂载 /etc/fstab 里面的内容。

mount -a

作者&＃xff1a; 小柒2012

分享是快乐的&＃xff0c;也见证了个人成长历程&＃xff0c;文章大多都是工作经验总结以及平时学习积累&＃xff0c;基于自身认知不足之处在所难免&＃xff0c;也请大家指正&＃xff0c;共同进步。