повторяю для больных девопсятиной: эту, кажущуюся вам архисложной задачу, решает заббикс - из коробки, вообще с около-нулем телодвижений (ок, с fs discovery беда-беда, надо либо добавить фильтр на докерные недоразумения, либо вручную потом удалять, запретив заново перепроверять - в зависимости от числа хостов)

> потому как пялится на сотни графиков как-то не реально.

ну так это вот ровно потому, что вы используете кривые и неэффективные этажерки из игогошных  игрушек не умеющих взаимосвязи между собой, вместо нормальных продуктов (их и кроме жабикса есть, но, увы, подорого)

мне не нужно пялиться на "сотни графиков". Мне пришел алерт - мне нужно понять - это состояние системы действительно неправильное, или это случайность, или мы плавно разгоняемся уже несколько недель.
Для этого обычно достаточно открыть график по нужному айтиму, поглядеть, как оно себя ведет сейчас, как выглядит нормальная картина на это время дня - вчера, месяц, год назад, и для этого ничего не надо создавать вручную.

Вручную создаются интегральные картинки, по которым можно угадывать состояние сложных взаимосвязанных систем - это, действительно, сейчас удобнее делать в графане (в жабиксе немое кино уже запретили, а эпоха звукового что-то никак не наступит - кто в теме, поймет) - один чорт, руками, никто кроме меня не знает, что и как нужно нарисовать, чтобы одним взглядом охватить ситуацию.

К алертам это все имеет очень опосредованное отношение - у меня нет алерта "в системе после изменений происходит неведомая хня" - а когда пойдут конкретные алерты на таймауты и исчерпания ресурсов, у нас уже будет проблема, которую видят юзеры, поэтому среагировать надо раньше.