MySQL新身份验证插件caching_sha2_password

同事反馈了一个问题&＃xff0c;MySQL客户端连接数据库的时候&＃xff0c;提示这个错误&＃xff0c;

ERROR 2059 (HY000): 
Plugin caching_sha2_password could not be loaded: 
/usr/lib64/mariadb/plugin/caching_sha2_password.so: 
cannot open shared object file: No such file or directory

这其实是个MySQL新的身份验证插件caching_sha2_password的问题&＃xff0c;碰巧看到GreatSQL社区的这篇文章《浅谈 MySQL 新的身份验证插件 caching_sha2_password》&＃xff0c;可以借鉴一下。

介绍

从 MySQL 8.0.4 开始&＃xff0c;MySQL 默认身份验证插件从 mysql_native_password  改为 caching_sha2_password 。相应地&＃xff0c;libmysqlclient 也使用 caching_sha2_password 作为默认的身份验证机制。

起因

在这之前 MySQL 5.6/5.7 使用的默认密码插件是 mysql_native_password。mysql_native_password 的特点是不需要加密的连接。该插件验证速度特别快&＃xff0c;但是不够安全&＃xff0c;因为&＃xff0c;mysql_native_password 使用的是于 SHA1 算法&＃xff0c;NIST&＃xff08;美国国家标准与技术研究院&＃xff09;在很早之前就已建议停止使用 SHA1 算法&＃xff0c;因为 SHA1 和其他哈希算法&＃xff08;例如 MD5&＃xff09;容易被破解。

其实从 MySQL 5.6 开始就引入了更安全的认证机制&＃xff1a;ha256_password 认证插件。它使用一个加盐密码&＃xff08;salted password&＃xff09;进行多轮 SHA256 哈希&＃xff08;数千轮哈希&＃xff0c;暴力破解更难&＃xff09;&＃xff0c;以确保哈希值转换更安全。但是&＃xff0c;建立安全连接和多轮 hash 加密很耗费时间。虽然安全性更高&＃xff0c;但是验证速度不够快。

改进

MySQL 试图结合二者的优点。于是在 MySQL-8.0.3  引入了一个新的身份验证插件 caching_sha2_password &＃xff0c;作为sha256_password的代替方案&＃xff0c;在sha256_password 的基础上进行了改进补上了短板&＃xff0c;既解决安全性问题又解决性能问题。与此同时 sha256_password将退出时代的浪潮。MySQL 预计在未来版本中将其删除。使用 sha256_password 进行身份验证的 MySQL 账户建议转为 caching_sha2_password。

结果

因为默认身份验证机制的更改&＃xff0c;大家在使用 MySQL 8.0 时候出现了很多相关的问题。网上的大部分教程都是教人改回mysql_native_password验证方式  mysql_native_password。但是笔者认为&＃xff0c;MySQL 更改默认插件是为了更好的安全性考虑。如果有 MySQL 服务要公网上使用&＃xff0c;建议还是尽量使用 caching_sha2_password作为认证插件。

示例&＃xff1a;使用旧版本客户端连接时报错&＃xff1a;

shell> mysql -uroot -p
ERROR 2059 (HY000): Authentication plugin &＃39;caching_sha2_password&＃39; cannot be loaded

具体机制分析

mysql_native_password

mysql_native_password 作为 MySQL 5.6/5.7 的默认密码插件 。其优点是它支持 challenge-response &＃xff08;挑战应答方式&＃xff09;&＃xff0c;这是非常快的验证机制&＃xff0c;无需在网络中发送实际密码&＃xff0c;并且不需要加密的连接。

客户端连接MySQL实例时&＃xff0c;首先需要从服务器端获得一个20字节的随机数。

此外&＃xff0c;mysql_native_password 使用了新的哈希算法进行认证校验。对于用户的原始密码&＃xff0c;通过SHA1(SHA1(password))两次哈希计算结果保存在 mysql.user 表的 authentication_string 列中。其中用户密码通过哈希计算后保存&＃xff0c;没有加盐&＃xff08;salt&＃xff09;。

通过上述这样的处理&＃xff0c;MySQL数据库本身已然非常安全。然而&＃xff0c;随着时间的推移&＃xff0c;目前存在以下两种潜在风险&＃xff1a;

• SHA1哈希算法也已经变得比较容易破解。

• 相同的密码拥有相同的哈希值。

SHA1、MD5等之前的哈希算法都已然不再安全&＃xff0c;更为安全的SHA256、SHA512哈希算法也已推出。作为数据存储最终承载者&＃xff0c;应该使用更新的加密机制机制。

caching_sha2_password

在cache_sha2_password密码认证机制下&＃xff0c;其改进如下所示&＃xff1a;

• 保存在 authentication_string 中的哈希值为加盐后的值&＃xff0c;即使两个不同用户的密码相同&＃xff0c;保存在计算机中的哈希值也不同。

• 哈希算法升级为了更为安全SHA256算法。

• 哈希算法的 round 次数从原来的两次&＃xff0c;提升为了5000次&＃xff0c;round次数越多&＃xff0c;每次计算哈希值的代价越大&＃xff0c;破解难度也就越大。

• 用TLS的加密或RSA密钥传输方式从客户端将密码传送到服务端。

caching_sha2_password 通讯过程解析

1. 对于大多数连接尝试&＃xff0c;当密码的哈希值有缓存在内存中时&＃xff0c;它的验证是基于 SHA256 的challenge-response机制&＃xff08;与 mysql_native_password 中基于 SHA1 的challenge-response机制相比更快&＃xff09;&＃xff0c;下图演示了在有哈希缓存时的验证流程。

从图中我们看到&＃xff0c;客户端对密码进行多重哈希加密生成 Scramble 发送给服务端&＃xff0c; 服务端检查内存的缓存&＃xff08;memory cache&＃xff09;中是否存在该条目。当值在缓存中存在证明本次连接合法&＃xff0c;服务器会告诉客户端快速认证成功&＃xff1a;发送 fast_auth_success 包到客户端&＃xff0c;并且发送确认报文。然后服务器就可以和客户端正常通信了。

1. 当没有这种缓存时&＃xff0c;caching_sha2_password 需要使用安全连接&＃xff08;SSL/STL&＃xff09;进行密码交换。考虑到用户更改和 FLUSH PRIVILEGES 操作频率比较低&＃xff0c;所以在大多数情况下&＃xff0c;使用的都是基于challenge-response的身份验证&＃xff0c;不用建立安全连接。这省去了建立安全连接需要耗费的资源。下图总结了完整的验证流程。

从图中我们看到&＃xff0c;服务器在收到 Scramble 后,发现缓存中没有对应的值&＃xff0c;服务器会告诉客户端&＃xff0c;要建立安全连接使用完整的身份验证流程&＃xff1a;发送 perform_full_authentication 包到客户端&＃xff0c;之后客户端接收服务器的公钥&＃xff08;公钥文件如果已存在就省去这个步骤&＃xff09;。如果安全连接&＃xff08;SSL/STL&＃xff09;已经建立基于 &＃xff0c;则可以直接发送明文密码到服务端。如果没有安全连接&＃xff0c;客户端就会 向服务端发起获取公钥的请求&＃xff08;或者指定服务端公钥文件&＃xff09;&＃xff0c;使用公钥加密密码&＃xff0c;发送到服务端。服务器通过 SHA256 算法计算得到哈希值&＃xff0c;判断是否用户认证通过&＃xff0c;通过则发送 OK 包到客户端。然后服务器就可以和客户端正常通信了。

这里详细解释一下 RSA 非对称加密的通信过程&＃xff1a;

首先先明确一个概念&＃xff1a;非对称加密算法中&＃xff0c;有两个密钥&＃xff1a;公钥和私钥。如果用公钥进行加密&＃xff0c;只有对应的私钥才能解密&＃xff1b;反之亦然。

RSA 密钥交换过程&＃xff1a;

1.服务器生成一对密钥并将公钥向其他方公开&＃xff08;以明文发送给客户端&＃xff09;。

2.客户端使用服务器的公钥对密码进行加密后发送给服务器。

3.服务器用对应的私钥对加密信息进行解密。

因为客户端用公钥加密的信息只能用服务器的私钥解密&＃xff0c;所以这个连接过程可以视为加密通信。

需要注意的地方

默认身份验证插件的更改意味着&＃xff1a;

在 MySQL 8.0.4 之后创建的所有新用户将默认使用 caching_sha2_password 作为身份验证插件。

mysql> SELECT USER,PLUGIN FROM mysql.&＃96;user&＃96; ;
&＃43;------------------&＃43;-----------------------&＃43;
| USER             | PLUGIN                |
&＃43;------------------&＃43;-----------------------&＃43;
| root             | caching_sha2_password |
| mysql.infoschema | caching_sha2_password |
| mysql.session    | caching_sha2_password |
| mysql.sys        | caching_sha2_password |
&＃43;------------------&＃43;-----------------------&＃43;
6 rows in set (0.06 sec)

libmysqlclient 默认使用 caching_sha2_password&＃xff0c;可以通过手动修改切换到其他的身份验证插件。

使用 caching_sha2_password 插件的客户端&＃xff0c;连接到服务器时&＃xff0c;不会使用名为密码。密码传输是如何进行的取决于是否使用安全连接或 RSA 对密码加密&＃xff1a;

• 如果连接是安全的&＃xff0c;可以不使用 RSA 密钥。适用于使用 TLS 加密的 TCP 连接&＃xff0c;以及 Unix 套接字文件和共享内存连接。密码以明文格式发送&＃xff0c;但不能被窃听&＃xff0c;因为连接是安全的。

• 如果连接不是安全的&＃xff0c;可以使用 RSA 密钥对。适用于未使用 TLS 加密的 TCP 连接和 named-pipe 连接。RSA 仅用于客户端和服务器之间的密码交换&＃xff0c;防止密码被截取。当服务器接收到使用公钥加密的密码后&＃xff0c;它使用私钥解密。一个随机字符串用在加密中&＃xff0c;防止重放攻击&＃xff08;repeat attacks&＃xff09;。

在 MySQL 8.0.3 以上版本中。默认自动完成  RSA 密钥对进行密码交换。

关于主从复制

如果用于复制的用户使用了 caching_sha2_password身份验证插件&＃xff0c;并且没有启用安全连接&＃xff08; 在group_replication_recovery 启用SSL支持&＃xff09;&＃xff0c;MySQL 将使用 RSA 密钥对进行密码的交换&＃xff0c;可以把主节点的公钥手动拷贝到从节点的服务器中&＃xff0c;也可以设置成&＃xff1a;自动为请求加入组的节点提供公钥。

复制本身是支持加密的连接。在 MySQL 8.0.4中&＃xff0c;添加了复制对 RSA 加密的支持。

• CHANGE MASTER 可以通过以下个参数来启用基于 caching_sha2_password RSA 密钥来交换密码&＃xff1a;

  指定 RSA 公钥路径
- MASTER_PUBLIC_KEY_PATH &＃61;"key_file_path"  #从服务端获取 RSA 公钥
- GET_MASTER_PUBLIC_KEY &＃61; {0 | 1}

• Group Replication 可以通过以下个参数来启用基于 caching_sha2_password RSA 密钥来交换密码&＃xff1a;

  #指定 RSA 公钥路径
––group-replication-recovery-public-key-path
#从服务端获取 RSA 公钥
––group-replication-recovery-get-public-key

数据库升级

数据库升级到 MySQL 8.0.4 会怎样&＃xff1f;

在升级之前创建的用户&＃xff0c;身份认证插件不会更改。在升级之后创建的用户默认使用 aching_sha2_password身份验证插件。除非使用 --default-authentication-plugin 手动指定认证插件插件。因为不会更改升级前已有用户。因此&＃xff0c;使用升级后依然可以用旧版本的客户端连接这些用户。

相应地&＃xff0c;libmysqlclient 支持 mysql_options() C API函数的 MYSQL_DEFAULT_AUTH 选项。&＃xff08;对于 MySQL 包中可用的基于 libmysqlclient 的客户端工具&＃xff0c;可以用 ––default-auth 命令行选项达到相同的目的。&＃xff09;

建议使用 cache_sha2_password 因为它更安全。并且升级 libmysqlclient 到 MySQL 8.0.4 或更高版本&＃xff0c;以便支持新的身份验证插件。

参考资料

[MySQL 8.0.4 : New Default Authentication Plugin]

 caching_sha2_password]https://dev.mysql.com/blog-archive/mysql-8-0-4-new-default-authentication-plugin-caching_sha2_password

[得物技术浅谈MySQL 8.0&＃xff1a;新的身份验证插件]

https://segmentfault.com/a/1190000040733952

[MySQL 8.0密码认证机制升级&＃xff0c;不知道可能导致业务不可用&＃xff01;&＃xff01;]

https://mp.weixin.qq.com/s/jfoH6D8NfoaNN7eexbzKGA

[组复制安装部署 | 全方位认识 MySQL 8.0 Group Replication]

https://mp.weixin.qq.com/s/sydu0alXDECcHm5GNMvtdA

如果您认为这篇文章有些帮助&＃xff0c;还请不吝点下文章末尾的"点赞"和"在看"&＃xff0c;或者直接转发pyq&＃xff0c;

近期更新的文章&＃xff1a;

《金融知识小科普 - 北向资金》

《MySQL的MVCC再学习》

《金融知识小科普 - 宽基指数》

《能从家中看球的球场》

《MySQL使用load data导入数据错误的一个场景》

近期的热文&＃xff1a;

《"红警"游戏开源代码带给我们的震撼》

文章分类和索引&＃xff1a;

《公众号1100篇文章分类和索引》