Testinfra - библиотека для написания тестов направленных на проверку состояний служб, серверов и т.п., может работать с ansible, puppet, chef.
Можно использовать в сриптах или просто написать тест для проверки состояния системы и запускать его руками.
Скачать книгу