Prometheus + Grafana 📊 Мониторинг софта и железа 📚 Сбор метрик и построение графиков 📉

Хостинг мастернод мой бот - t.me/BeHostingBot
Prometheus по моему мнению является лучшим сборщиком метрик на текущий момент. Легкий, быстрый, легко масштабируемый, отвечает всем нуждам. Легко кастомизировать под себя. А в связке с Grafana просто бомба. Любой мониторинг чего угодно у вас в кармане, плюс оповещения почти из коробки.
Данное решение подходит для HA проектов, не говоря уже о малом бизнесе и обычном администрировании.
Первый канал - / @beminer
лучший VDS хостинг для наших нужд - goo.gl/QqDX31
Блог канала - be-miner.info/
Instagram - / bgtolife
Чат в телеграме- t.me/Bm_censored
Группа в ВКонтакте - beminer
GitHub - github.com/beminer
Благодарность и задать вопрос -
www.donationalerts.ru/r/beminer

[@K0TOXJle6]

Суть видео: Ну вот всё очень удобно, можно строить графики на основе метрик. Конец.

[@BeGeek101]

можешь сделать лучше? - сделай лучше! суть видео - показ. Каждый может зайти хотя бы на офф сайт и посмотреть как работает. Так же гугл никто не отменял. Плюс есть следующие видео

[@user-yc6ez9lf9t]

@@BeGeek101 >Каждый может зайти хотя бы на офф сайт и посмотреть как работает Для чего тогда твое видео?

[@user-cs7rz2jx1m]

@@BeGeek101, вот честно, я зашел узнать что такое графана и прометеус. До этого я ни разу не видел этих продуктов. И у меня возник вопрос простите, а о чем именно это видео? Я понимаю что у вас нет времени на сьемку. Я понимаю что вы постарались на чистой импровизации рассказать что прометеус это круто. Но блин без сценария и показа руками как это работает ценность видео стремится к нулю. с ваших слов можно интерпретировать так: 1. Прометеус поделка на go, которая теоретически может регулярно собирать "что-то". 2. Это "что-то" можно собрать только с веб сервера. Про иные способы доставки/получения этого "что то" не сказано ни слова. Даже нет уверенности что они существуют. 3. Как сгенерировать это "что-то" ? Что оно должно содержать? А корень хрена его знает. В видео не показано. 4. Каким матерным словом можно сказать прометеусу как собирать это "что-то"? Из вашего видео не ясно от слова совсем. 5. С прометеусом может связаться графана и строить божественные графики. Протокол обмена и формат данных которые принимает графана? Объем данных получаемых за одну секунду?

[@worldbestgood]

офигенное видео

[@Frezer911]

Пока что нашел только одно крутое русскоязычное видео, запилил по нему метрики бля своего ,flask проекта kzbin.info/www/bejne/jYLQoZiFq6h2i7s

[@user-zs2eg3hg2y]

Минимум полезной информации

[@TalifaKumi]

болтовня одна.

[@rockmetal1064]

Хотелось бы больше практики, конкретики. Не на словах: как запустить сервис, а прям показать командой запуск. Как пользоваться node_exporter, alertmanager, опять таки конкретикой, на примерах. Спасибо, если будет такое видео)

[@TalifaKumi]

ну про цвет от зеленого к красному хорошо объяснил. спасибо. тема от желтого к зеленому осталась не раскрыта. очень интересно как монтировал и файл пропал. автор, снимай еще!

[@creatives8917]

Самое главное, что получил от этого видео- направление в какую сторону нужно идти. Очень полезно. Спасибо!

[@Leonardo-gd2iz]

Спасибо. Подскажите, а как размещать панели горизонтально рядом с друг другом? Я создаю панели с графиками и они выстраиваются друг под другом вертикально.

[@1Chitus]

Можно пожалуйста подробный видос с установкой и примерами конфигов ?

[@myroadtodream]

Почтеннейший, пытался все это время разобраться с zabbix, наткнулся на твой видос, и понял, как слеп я был и есть )

[@user-im6ex8bz3v]

А тебя интересно слушать!

[@user-ug2dw3qv4y]

Хорошее видео, не знал про Prometheus вообще, из видео понял более менее смысл что он из себя представляет. Если бы видос был на 2 часа, даже не открыл бы

[@Cmpe1ok]

В комментах только ленивый не написал, что чувак распинался о том, как можно сделать красивый график и показал его - 20 минут, а как идет обмен данными, как собираются эти самые данные, чтобы построить КРАСИВЫЙ график и прочее, так и не показал… по итогу заббикс делает все то же самое, собирается в два клика через ОК, ОК, имеет агенты и через snmp ну м пр. айпиаи, а насколько красиво - на вкус и цвет фломастеры разные… кому то и «кактус» подходит

[@Steinus11]

Подскажите пожалуйста как это д..... снести??? что-то не попадалось такое, я их останавливаю а они стартуют, удалю images говорит запущен контейнер такой, стопаю этот контейнер и следом удаление images удаляется а потом бац они все снова запущены (рука лицо) vps ребутаю они все работают как работали, уже хз что делать

[@masterbpr0]

Бро спасибо, все круто. Спасибо за труд

[@BeGeek101]

welcome

[@user-jj9dc9lz5d]

Верните мне 17 минут жизни

[@myroadtodream]

Если можно сделай обучающее видео по Grafana + Prometeus, будем очень благодарны, подскажи пожалуйста как мониторить температуру процессора в grafana? ;)

[@BeGeek101]

если в node_exporter нет метрики по температуре, то прийдется написать свой exporter )

[@user-vz6uv7en8k]

на работе новичкам так обьясняют - ничерта не понятно жиза

[@igormogilevtcev4912]

Как по мне - многовато воды, мелкий шрифт, нет конкретики. Если одно из первых видео, то норм для начала

[@BeGeek101]

шрифт да, дальше начал исправляться. Видео первое, чуть затрагивал прометеус при сборе метрик с докера

[@tyncha1]

ochen' mnogo lishnih slov. mojno bylo korotko i chetko pokazat' na slaidah,chem sebya snimat'. ya novichok v etoi sfere, poetomu takoi feedback. uspehov!

[@tvoutru]

Было бы отлично если бы автор взял одну число текстом и вставил бы его в график.

[@MrFrimko]

Жалко что не раскрыл тему каунтеров в прометеусе( Что бы делать нормальные метрики, надо играться с разным набором каунтеров и агрегировать их. Например если хотите получить от интернет магазина график "среднее количество товаров в заказе" Нужно сделать 2 инкремент каунтера - количество заказов и количество товаров. А в графане выводить результат деления одного каунтера на другой (товаров в моменте/заказов в моменте).

[@BeGeek101]

цель видео была показать, что есть такая штука, как прометеус) counter крутая штука в бизнес метриках и отчасти в администрировании

[@sysroman]

надо бы еще мельче сделать размер шрифта, что наверняка не кому видно не было)

[@BeGeek101]

ну сорян, исправляюсь потихоньку. Да и там я на ноуте 13 дюймов с мелким разрешением, сильно не растянуть картинку

[@LngPHP]

В 4К все видно

[@uvee1134]

есть ли смысл переходить конторе с zabbix+grafana на prometheus+grafana?

[@BeGeek101]

насколько большая контора и сколько будет стоить переход? у нас крупная контора и мы перешли, ни разу не пожалели

[@kirillmelnikov7846]

Я думаю зависит от поля деятельности. У нас вот ISP и прям интересно как прометеус на практике дружит с SNMP и реализует штуки типа LLD. Сам только сегодня накатил графану, хочу там рисовать стату по астериску, надо разбираться. В идеале бы рисовать там ключевые метрики по предприятию. Upd: Zabbix 4.2 - Prometheus Integration; Zabbix Documentation 4.4: Discovery using Prometheus data. Data provided in Prometheus line format can be used for low-level discovery (да ладна). Судя по тому, что гуглится, имхо SNMP в Zabbix удобней реализовано. Prometheus/snmp_exporter: Due to the dynamic dependency on NetSNMP, you must build the generator yourself. Switch_discover передаёт привет через пару кликов для каждого свича/роутера, что может сделать минимально обученный техник, в отличие от сборки пакета и преодоления (вероятных) сопутствующих сборке проблем. В общем каждой задаче свой инструмент.

[@indiangodalzhioni6383]

действительно информативный ролик, но пожалуйста, готовьте текст ДО записи :)

[@JeffandFantom]

сделай Gitlab semantic-release tutorial

[@ilyin_romanych]

Спасибо за знания!

[@vladn9972]

Что за кресло ? Как на нём ?

[@nataliiadibrova9928]

Очень полезное видео, спасибо большое! Я добралась до алёртов в графане. Подскажите пожалуйста, если у меня на одной панели 5 хостов, мониторится CPU, как мне отправить сообщение (алёрт) с названием/IP сервера, на котором проблемы? Как я понимаю, переменные в сообщении нельзя применять.

[@BeGeek101]

на одном графике? алерт через что отправляется? через алертменеджера? в алертменеджере куча переменных же, динамически подставится тот хост, по которому загорелся алерт рекомендую глянуть на алерты графаны kzbin.info/www/bejne/p6nIpoaXmrB7l5Y там можно сделать тоже самое, только намного проще и нагляднее )

[@robotbender817]

Графана заебись, вот только когда надо сделать что то сложнее типа аля "пивот" из мускуля .... все вешайся

[@BeGeek101]

с постгресом не было проблем

[@al-e-kssc813]

Подача материала - низкая. Понял только то, что в принципе метрики и их нужно как-то собирать через Прометеус в Графана (а это можно прочитать и из названия за 2 секунды.)... А уже как и что - нужно искать инфу/видео отдельно.

[@MrZasimovich]

Спасибо большое!! Сейчас ищу адекватные основы по установке и настройке Prometheus и Grafana, т.к. хочу ставить в кластер Kubernetes и нужно понимать что куда и зачем. Из каких компонентов основных состоит, на каких портах работает, какие и как собирать метрики с контейнеров и самих рабочих нод кластера, как конфигурить конфиг файл.

[@BeGeek101]

в кубер буду пробовать в январе ставить =) тож есть задачки у тебя кубер на бар метал или с облаке?

[@MrZasimovich]

@@BeGeek101 Я развернул на AWS с помощью KOPS, используя спотовые инстансы в качестве рабочих нод (t2.medium обошлись мне в 0,015$ час. при их реальной цене on-demand 0,0464$ ). Очень дешева и гибкая сборка получилась. Рекомендую. Головняка почти никакого) и очень удобно. Особенно подымать PV, PVC легче простого, AWS автоматически подымает свои Volumes при обьявлении PVC, нужно только указать тип Volumes и количество необходимых iops. Правда намучался с установкой metrics-server (замена Heapster который уже deprecated с 2018 года) для сборки метрик с нод (по загрузке CPU, Memory). Он нужен для HorizontalPodAutoscaler.

[@BeGeek101]

aws, как и gce не подходят, очень много арендуем железа и надо на нем разворачивать, да и гибкости в своем железе больше ) но сложно на голом железе крутить, туговато дается кубер

[@MrZasimovich]

@@BeGeek101 В том то и дело, что на голом железе приходится абсолютно всё самому поддерживать, зато конечно опыта в администрировании поболее будет, практика.. все дела...Но я себе поднял один мастер и два воркера для учебы, не для бизнеса. На железе подымать времени нету. Хотя в будущем планирую пройтись по Kubernetes Hard-Way. Но на работе стоит именно такая сборка, из трех кластеров на KOPS AWS для dev prod и внутренних решений (GitLab, Jira и .т.д.). А рабочие ноды на спотах даже в проде.

[@MrZasimovich]

@@BeGeek101 если у вас сборка на голом железе. рекомендую к просмотру - kzbin.info/www/bejne/hKe0imiqqt10grs в двух частях. Вторая часть основная.

[@myroadtodream]

Ещё один полезный канал, надеюсь будет контент развиваться на доступном языке

[@BeGeek101]

спасибо

[@ZeeBeat]

Где продолжение тооо

[@BeGeek101]

а нужно? что то про докер народу особо не заходит видео =(

[@ZeeBeat]

​@@BeGeek101 Зато про Дестини 2 им, #@$ть, заходит =\ Ну вот мне интересно. Я сейчас активно в это вникаю и подача этого видоса показалась самой доходчивой и легкой.

[@BeGeek101]

это да, про дестини зашло почему то))

[@MsZoltoN]

@@BeGeek101 про докер очень даже интересно, тем более что такого контента мало а с каждым дне он становиться популярнее

[@BeGeek101]

вот странно что контента мало, когда должно быть дофига. Хотя админы наверн не оч любят каналы делать. Но в текстовом виде вроде всего навалом на текущий момент

[@eduardgorte8241]

Автор просто показывает графану

[@alexmiloslavskiy7309]

Потрачено 20 минут жизни, лучше идти другое смотреть, не тратьте время

[@user-ff3nw9qh7z]

зря время потратил

[@tarasakimov1476]

Че ноешь в начале

[@Artur-hn8sg]

Ну вот тудя сюда бла бла короче быстренько....

[@user-is8kr8vy6h]

19 минут воды, спасибо за потраченное время

[@oldzas]

Сыро, ниочем

[@valerayatskevich3293]

какое днище

[@noone-hi6kq]

графана говно, хуже темы нет, чтобы наковырять нормально что-то

[@Anton_Holovin]

самое бессмысленное видео. нахера такое вообще снимать

[@anton_2002]

Можно пожалуйста подробный видос с установкой и примерами конфигов ?

[@ilyaplot]

На сайте прометеуса и графаны есть замечательные простые примеры установки и запуска. Очень просто разобраться. Видос на 2 минуты ) Максимально все удобно там

[@myroadtodream]

@@ilyaplot добрые слова )