glusterfsd Ubuntu 18.04 高 iowait 问题

glusterfsd Ubuntu 18.04 高 iowait 问题

我们在两个运行 Ubuntu 的虚拟机管理程序上运行 gluster。当我们从 Ubuntu 14.04 升级到 18.04 时,它将 gluster 从 3.4.2 升级到 3.13.2。升级后,我们发现系统上的 iowait 显著增加,通过 top 和 iotop 测量,iotop 表明 glusterfsd 是罪魁祸首。出于某种原因,glusterfsd 正在执行更多磁盘读取和/或这些读取被以更高的速率阻止。客户虚拟机也看到更多的 iowait——它们的映像托管在 gluster 卷上。这导致虚拟机上托管的服务响应不一致。

我正在寻找有关如何排除故障和/或解决此问题的任何建议。我们还有其他网站仍在运行 14.04,因此我可以比较/对比任何配置参数和性能。

14.04 上的块调度程序设置为 deadline,18.04 上的块调度程序设置为 cfq。但将 18.04 调度程序更改为 deadline 并没有任何区别。

我想知道 18.04 上的 glusterfsd 是否缓存的内容不够多。我们尝试大幅增加 performance.cache-size,但没有任何效果。

我们正在考虑但尚未尝试的另一个选项是通过将软件包从 Ubuntu 19.04 反向移植到 18.04 来升级到 gluster 5.3。有人认为这可能会有帮助吗?

我们可以设置任何特定的调试日志记录或运行其他命令来更好地排除故障吗?任何想法、建议和创意都将不胜感激。

答案1

升级到 gluster 5.3 解决了这个问题。Ubuntu 18.04 有一个方便的 PPA 可用:

https://launchpad.net/~gluster/+archive/ubuntu/glusterfs-5

相关内容