на 2.29 по поводу "кто сторожит сторожа". Все решается на уровне того же прометея. Перекрестные мониторинги, каждый мониторит каждого, несколько реплик прометея, которые собирают одни и те же метрики , и все сливается в одно место на долгое хранение с дедупликацией (например в викторию ).