☰

（1）审计日志

tag-icon • tag-icon systemd server-crashes rhel7 system-monitoring
（1）审计日志

有没有办法确定 RHEL7 服务器是否通过 systemctl (或 reboot / shutdown 别名) 重新启动，或者服务器是否崩溃？使用 systemd 之前，这很容易确定last -x runlevel，但使用 RHEL7 就不那么清楚了。

答案1

有多种方法可以做到这一点，但我将介绍我能想到的 4 种最佳方法。（编辑：我在 redhat.com 上发布了此文章的精简版本。请参阅：如何区分 RHEL 7 中的崩溃和正常重启。

（1）审计日志

auditd 非常棒。您可以通过检查来查看它记录的所有不同事件ausearch -m。针对当前的问题，它会记录系统关闭和系统启动，因此您可以使用命令ausearch -i -m system_boot,system_shutdown | tail -4。如果此命令报告系统关闭随后是系统启动，一切都很好；但是，如果它报告 2系统启动行，则显然系统没有正常关闭，如下例所示：

[root@a72 ~]# ausearch -i -m system_boot,system_shutdown | tail -4
----
type=SYSTEM_BOOT msg=audit(09/20/2016 01:10:32.392:7) : pid=657 uid=root auid=unset ses=unset subj=system_u:system_r:init_t:s0 msg=' comm=systemd-update-utmp exe=/usr/lib/systemd/systemd-update-utmp hostname=? addr=? terminal=? res=success' 
----
type=SYSTEM_BOOT msg=audit(09/20/2016 01:11:41.134:7) : pid=656 uid=root auid=unset ses=unset subj=system_u:system_r:init_t:s0 msg=' comm=systemd-update-utmp exe=/usr/lib/systemd/systemd-update-utmp hostname=? addr=? terminal=? res=success'

（2）最后 -x

与上面相同，但使用简单的last -n2 -x shutdown reboot命令。系统崩溃的示例：

[root@a72 ~]# last -n2 -x shutdown reboot
reboot   system boot  3.10.0-327.el7.x Tue Sep 20 01:11 - 01:20  (00:08)    
reboot   system boot  3.10.0-327.el7.x Tue Sep 20 01:10 - 01:20  (00:09)

或者系统正常重启：

[root@a72 ~]# last -n2 -x shutdown reboot
reboot   system boot  3.10.0-327.el7.x Tue Sep 20 01:21 - 01:21  (00:00)    
shutdown system down  3.10.0-327.el7.x Tue Sep 20 01:21 - 01:21  (00:00)

（3）创建自己的服务单元

我认为这是最佳方法，因为您可以根据自己的需要进行调整。有无数种方法可以做到这一点。这是我刚刚想出的一个方法。下一个服务仅在关机时运行。

[root@a72 ~]# cat /etc/systemd/system/set_gracefulshutdown.service
[Unit]
Description=Set flag for graceful shutdown
DefaultDependencies=no
RefuseManualStart=true
Before=shutdown.target

[Service]
Type=oneshot
ExecStart=/bin/touch /root/graceful_shutdown

[Install]
WantedBy=shutdown.target
[root@a72 ~]# systemctl enable set_gracefulshutdown.service 
Created symlink from /etc/systemd/system/shutdown.target.wants/set_gracefulshutdown.service to /etc/systemd/system/set_gracefulshutdown.service.

然后，当系统启动时，只有上述关机服务创建的文件存在，下一个服务才会启动。

[root@a72 ~]# cat /etc/systemd/system/check_graceful.service 
[Unit]
Description=Check if system booted after a graceful shutdown
ConditionPathExists=/root/graceful_shutdown
RefuseManualStart=true
RefuseManualStop=true

[Service]
Type=oneshot
RemainAfterExit=true
ExecStart=/bin/rm /root/graceful_shutdown

[Install]
WantedBy=multi-user.target
[root@a72 ~]# systemctl enable check_graceful
Created symlink from /etc/systemd/system/multi-user.target.wants/check_graceful.service to /etc/systemd/system/check_graceful.service.

因此，在任何给定时间，我都可以通过执行以下操作来检查上一次启动是否是在正常关机后完成的systemctl is-active check_graceful，例如：

[root@a72 ~]# systemctl is-active check_graceful && echo YAY || echo OH NOES
active
YAY
[root@a72 ~]# systemctl status check_graceful
● check_graceful.service - Check if system booted after a graceful shutdown
   Loaded: loaded (/etc/systemd/system/check_graceful.service; enabled; vendor preset: disabled)
   Active: active (exited) since Tue 2016-09-20 01:10:32 EDT; 20s ago
  Process: 669 ExecStart=/bin/rm /root/graceful_shutdown (code=exited, status=0/SUCCESS)
 Main PID: 669 (code=exited, status=0/SUCCESS)
   CGroup: /system.slice/check_graceful.service

Sep 20 01:10:32 a72.example.com systemd[1]: Starting Check if system booted after a graceful shutdown...
Sep 20 01:10:32 a72.example.com systemd[1]: Started Check if system booted after a graceful shutdown.

或者这是非正常关机后的情况：

[root@a72 ~]# systemctl is-active check_graceful && echo YAY || echo OH NOES
inactive
OH NOES
[root@a72 ~]# systemctl status check_graceful
● check_graceful.service - Check if system booted after a graceful shutdown
   Loaded: loaded (/etc/systemd/system/check_graceful.service; enabled; vendor preset: disabled)
   Active: inactive (dead)
Condition: start condition failed at Tue 2016-09-20 01:11:41 EDT; 16s ago
           ConditionPathExists=/root/graceful_shutdown was not met

Sep 20 01:11:41 a72.example.com systemd[1]: Started Check if system booted after a graceful shutdown.

（4）journalctl

值得一提的是，如果您配置systemd-journald保留持久日志，则可以使用journalctl -b -1 -n它查看上次启动的最后几行（默认为 10 行）（-b -2是之前的启动，等等）。系统正常重启的示例：

[root@a72 ~]# mkdir /var/log/journal
[root@a72 ~]# systemctl -s SIGUSR1 kill systemd-journald
[root@a72 ~]# reboot
...
[root@a72 ~]# journalctl -b -1 -n
-- Logs begin at Tue 2016-09-20 01:01:15 EDT, end at Tue 2016-09-20 01:21:33 EDT. --
Sep 20 01:21:19 a72.example.com systemd[1]: Stopped Create Static Device Nodes in /dev.
Sep 20 01:21:19 a72.example.com systemd[1]: Stopping Create Static Device Nodes in /dev...
Sep 20 01:21:19 a72.example.com systemd[1]: Reached target Shutdown.
Sep 20 01:21:19 a72.example.com systemd[1]: Starting Shutdown.
Sep 20 01:21:19 a72.example.com systemd[1]: Reached target Final Step.
Sep 20 01:21:19 a72.example.com systemd[1]: Starting Final Step.
Sep 20 01:21:19 a72.example.com systemd[1]: Starting Reboot...
Sep 20 01:21:19 a72.example.com systemd[1]: Shutting down.
Sep 20 01:21:19 a72.example.com systemd-shutdown[1]: Sending SIGTERM to remaining processes...
Sep 20 01:21:19 a72.example.com systemd-journal[483]: Journal stopped

如果输出结果良好，则表明系统已正常关闭。话虽如此，但根据我的经验，当发生不良事件（系统崩溃）时，它并不是非常可靠。有时索引会变得很奇怪。

答案2

有趣的是，我昨晚刚好重新启动了 CentOS 7 系统，因此我有一个很好的日志可以查看。

如果发生崩溃，显然在崩溃和系统重启之间不会记录任何内容。

在重新启动的情况下，这非常明显，因为您会获得 systemd 关闭系统所执行的（几乎）所有操作的日志。

除了关机或进入单用户模式之外，在任何情况下你都不太可能看到这样的日志条目：

Jul 13 01:27:55 yaungol systemd: Stopped target Multi-User System.

您可以重新启动自己的系统来查看实际记录的内容。

答案3

我不太喜欢这个答案，但这是我们从 RH 那里得到的答案。我把它发布在这里，希望它能帮助别人。

一种可能的方法是 greprsyslogd中的/var/log/messages。正常关机会有exiting on signal 15。崩溃则不会。

tac /var/log/messages | grep 'rsyslogd.*start\|rsyslogd.*exit'

连续两start行可能表示崩溃。 后面start跟着exit可能表示重新启动。

不幸的是，如果 rsyslogd 发生故障或在重启/崩溃之外重新启动，也可能会产生不好的结果。

答案4

这似乎对于“正常关机”（shutdown、、）以及“崩溃”（关机、重置、）reboot始终有效：systemctlecho c > /proc/sysrq-trigger

last -x | grep 'reboot\|shutdown'

一行reboot接一行shutdown表示“正常关闭”。两reboot行表示“崩溃”。

相关内容