Что такое ELK за 10 минут: Elasticsearch, Kibana и Logstash

Виртуальные серверы со скидкой 20% по промокоду LISTENIT: sweb.ru/vds/?...
Мощный конфигуратор серверов: sweb.ru/vds/?...
События и статьи про анализ и проектирование ИТ-систем - t.me/itsysdes_events
00:00 - Вступление
01:44 - Что такое стек ELK и из чего он состоит
2:09 - Что такое Elasticsearch
2:32 - Что такое Logstash
3:06 - Что такое Kibana
3:37 - Как работает стек ELK
3:52 - Чем хорош ELK
4:31 - Ключевые возможности Elasticsearch
5:30 - Основные достоинства ELK
6:28 - Недостатки ELK
8:44 - Альтернатива ELK
9:12 - Примеры реального использования Elasticsearch
Поддержать канал разово - yoomoney.ru/to/410012243709514
Поддержать канал подпиской - boosty.to/listenit
Я.Дзен - zen.yandex.ru/listenit
Телеграм-канал - t.me/listenit_channel
По вопросам сотрудничества - t.me/ed_akimov
Ссылка на статью 1 - aws.amazon.com/ru/what-is/elk...
Ссылка на статью 2 - www.bigdataschool.ru/wiki/ela...
Ссылка на статью 3 - www.bigdataschool.ru/blog/elk...
Что такое NoSQL за 6 минут - • Что такое NoSQL за 6 м...
Что такое МИКРОФРОНТЕНД за 10 минут - • Что такое МИКРОФРОНТЕН...
Различия SOA и микросервисной архитектуры за 9 минут - • Различия SOA и микросе...
Компиляция и интерпретация за 10 минут - • Компиляция и интерпрет...
Что такое TypeScript за 9 минут - • Что такое TypeScript з...
Что такое Swagger и OpenAPI за 3 минуты - • Что такое Swagger и Op...
Введение в REST API за 7 минут - • Введение в REST API за...
Различия REST и SOAP за 4 минуты - • Различия REST и SOAP з...
Что такое HTTP и HTTPS за 9 минут - • Что такое HTTP и HTTPS...
Что такое TCP/IP - • Что такое TCP/IP: Объя...
Что такое прокси-сервер за 7 минут - • Что такое прокси-серве...
Что такое Kubernetes за 9 минут - • Что такое Kubernetes з...
Что такое Docker за 5 минут - • Что такое Docker за 5 ...
Что такое ETL и ELT за 10 минут - • Что такое ETL и ELT за...
Что такое CRUD за 6 минут - • Что такое CRUD за 6 минут
Что такое middleware за 7 минут - • Что такое middleware з...
Что такое идемпотентность - • Что такое идемпотентно...
Что такое ACID за 9 минут - • Что такое ACID за 9 минут
Что такое HATEOAS за 4 минуты - • Что такое HATEOAS за 4...
Что такое CI/CD - • Что такое CI/CD? Разби...
Что такое Code First подход за 4 минуты - • Что такое Code First п...
Что такое Contract First подход за 4 минуты - • Что такое Contract Fir...

[@MichaelZh]

Спасибо большое за видео!

[@apristen]

ELK это круто! Я применял в игровой индустрии (онлайн игры) причём совместо с Apache Kafka - им были связаны микросервисы (и там лётали events в JSON как раз) и часть данных с помощью Kafka Connect дублировалось в ELK и мы дофига по игрокам узнавали и DAU и ARPDAU и Retention и много чего ещё. Ну вот простой пример: в онлайн игре (одной из сотен, а игроков всего - десятки тысяч) уровни и сложность возрастает - как узнать не слишком ли сложный какой-то уровень? В идеальном случае если нарисовать столбцы диаграму где по X будет номер уровня, а по Y будет кол-во прошедших его - получится некий треугольник и чем более "пологий скат" тем проще люди проходят, а чем более крутой скат тем сложнее следующие уровни, но не это самое интересное! Самое интересно если уровень где-то посерёдке идёт "слишком сложный" то это уже не "линия", а ломаная - сначала пологий скат, а потом резкий бабах вниз (как раз на сложном уровне, ну и level designer срочно шёл уровень править). Ну и надо ли говорить как зависел (коррелировал) с этим этого Retention игроков? ;-)

[@ListenIT_channel]

Круто, очень интересный опыт!

[@apristen]

ах да, я хоть нового не сильно много пока узнал, но сходу лайк и подписка! (буду знакомым отправлять - у тебя очень внятно всё и складно объяснения)

[@user-xv3gn9nr9k]

Кратко и по делу!

[@user-si6iz9fj1f]

Хорошее видео, про ClickHouse тоже было бы интересно.

[@ListenIT_channel]

А вот про Clickhouse уже имеется - kzbin.info/www/bejne/aJOXmZiXhJiIbs0si=4p2ONsfMgr7cqUrX

[@shaon_os]

Отличный канал! Хотелось бы выпуски про асинхронность, Git и GitHub, фреймворки

[@ListenIT_channel]

Спасибо, очень приятно! Видео про Git уже есть, кстати kzbin.info/www/bejne/fWXJaoJ-aa6Ee5o

[@ashm_tech]

Многоуважаемый автор данного канала, благодарю вас за ваши образовательные видео! Если вам не трудно, снимите пожалуйста видео про экосистему Ripple, и отдельно по XRP.

[@stepanstepanov8106]

Афигенно

[@letsdosmth7666]

Сделайте пожалуйста ролик про WSDL!!!

[@user-fs1qb3cu1w]

Ждём видео про redis

[@anoobis7300]

а где скачать слайды можно?

[@user-bj9hd1bc4j]

А от куда вы знаете что применяется в АльфаБанке и Кари?

[@apristen]

а я знаю что Мегафон с его 140М абонентов - для сбора "бигдаты" - Kafka , а для анализа - ELK. откуда? да у меня сосед там работал, мы как-то "о своём об айтишном" трындели, я жаловался как мне настроить это всё (масштабировать точнее) в маленькой игровой компании с "до 100k уников-игроков в месяц" а он мне такой "пшли ща чо покажу - какой у нас зл***чий кластер (и не один) в Мегафоне!" , ну да там масштабы впечатляют прям. хотя стек точно такой же как в маленькой игровой компании. потому что задачи схожие примерно (приток/отток абонентигов, и т.д.)

[@vladimireliseev7602]

Главный вопрос - spaceweb можно получить серваки вне РФ? И чтобы можно было платить криптой?

[@user-gf1gf6yy1z]

Давай видос про ClickHouse

[@ListenIT_channel]

Clickhouse готов, прошу) kzbin.info/www/bejne/aJOXmZiXhJiIbs0

[@llRub3Nll]

Ставлю лайк потому что нравится качественный контент, потому что ELK не понравился, за это не могу поставить :Р

[@vkoskin]

Хочу про клик посмотреть видосик

[@ListenIT_channel]

Вот он, прошу) kzbin.info/www/bejne/aJOXmZiXhJiIbs0

[@user-oq4si8nh9h]

хочу СlickHouse!!!

[@ListenIT_channel]

Вопросов нет, вот видео Clickhouse - kzbin.info/www/bejne/aJOXmZiXhJiIbs0

[@apristen]

да! ClickHouse плиз!!!!

[@ListenIT_channel]

Вот и про Clickhouse записал kzbin.info/www/bejne/aJOXmZiXhJiIbs0

[@kselnaag2482]

Хайп вокруг кликхауса не утихает, хотелось бы большой обзор простыми словами, что это такое

[@apristen]

БД это со встроенной аналитикой такая. из приятного что там "свой диалект SQL", а не "птичий язык" Apache Lucene как в ELK.

[@ListenIT_channel]

Видео про Clickhouse записал - kzbin.info/www/bejne/aJOXmZiXhJiIbs0

[@kselnaag2482]

​ @Listen IT Благодарочка =D

[@apristen]

@@ListenIT_channel ура!!! уже смотрю 🙂

[@alexneo4880]

КликХауз!

[@ListenIT_channel]

Закинул про Clickhouse kzbin.info/www/bejne/aJOXmZiXhJiIbs0

[@vladislavseverin4055]

Дрисня! Тупо взятая в англоязычном ресурсе и переведена на русский, чел вообще не вдупляет о чем говорит просто монотонное чтение...

[@apristen]

свои видосы покажи плиз, у тебе лучше контент?

[@qwertyLynx47]

Сейчас по умолчанию безопасность включена. В elasticsearch.yml в строке xpack.security.enabled: true стоит 🤔

[@artemiusz_j]

что такое викимедия?