VK Cloud Conf Astana. Aftermovie
0:59
VK Data Meetup. Databases & Storage.
2:25:53
Пікірлер
@user-sz9jg2uc8z
@user-sz9jg2uc8z 9 сағат бұрын
Верните аську
@user-freemanAS
@user-freemanAS 6 күн бұрын
😅невозможно не заметить какие то детали , а потом ты начинаешь слышать небольшие паузы…
@adminuPcu
@adminuPcu 8 күн бұрын
ВЕРНИТЕ АСЬКУ В ЗАД!!!!!
@adminuPcu
@adminuPcu 8 күн бұрын
КОГО ВЫ ПОСТАВИЛИ ПРЕДСТАВЛЯТЬ СВОЙ ПРОДУКТ???? ОНА ЖЕ ВСЯ ВСПОТЕЛА И ВОЛНУЕТСЯ!
@adminuPcu
@adminuPcu 8 күн бұрын
АДМИНЫ И РАЗРАБЫ - ВАШ ВК И РАЗРАБОТКИ ПОЛНАЯ ПОМОЙКА!!!!!
@antonman33
@antonman33 9 күн бұрын
Бред полный.Придется WhatsApp устанавливать по работе
@pavelbbb
@pavelbbb 10 күн бұрын
У вас имена за креслами, сделайте выше
@user-uj7kc4fy2q
@user-uj7kc4fy2q 20 күн бұрын
Сказочник... Безграничная нагрузка, безграничный размер.. Видать открыли портал в 4-е измерение с серверными стойками и бесплатной электроэнергией
@alexaxo
@alexaxo 20 күн бұрын
Вопросы: 1. У балансировщика (под которым мастер и 2 реплики) нет кнопки назначить внешний IP. Видимо он где-то внутри указан? Т.е. если мне нужно подключаться к этой БД из другого сервера (который не у вас), это ведь возможно? 2. А могу я сначала создать просто облачную БД у вас и пользоваться ей. И если в будущем мне понадобится репликация, тогда уже создать кластер? Это возможно? Сложно ли это? Или нужно будет с нуля всё создавать?..
@user-nl7fw3yp8p
@user-nl7fw3yp8p 23 күн бұрын
получается, не такое уж и бесконечное хранилище, если максимум миллард объектов в бакете и 25 бакетов
@Zaitceff
@Zaitceff 27 күн бұрын
Дак и как выбрать-то?))
@user-qj5ur8no5l
@user-qj5ur8no5l 28 күн бұрын
Слайды не видно же
@Multifutiy
@Multifutiy Ай бұрын
Просто 50 просмотров, крутой же обзор, почему так мало?
@forgotten_forbidden
@forgotten_forbidden Ай бұрын
2800 / 40 = 70 у вас кластера по 70 нод ?
@erjang.4086
@erjang.4086 Ай бұрын
гринплам это в основном в снг используется? а на западе у них есть свои аналоги?
@user-nq4fu9ft4b
@user-nq4fu9ft4b 2 ай бұрын
Автор (Илья Нырков), потрудитесь узнать разницу слов "образы" и "образа".
@Sila_v_pravde123
@Sila_v_pravde123 2 ай бұрын
нет ссылки на github
@barma1309
@barma1309 2 ай бұрын
одна болтовня, можно смело на середину перематывать
@user-yy4lm3zd6c
@user-yy4lm3zd6c 2 ай бұрын
Пельмень
@athlo9sky
@athlo9sky 2 ай бұрын
Было бы шикарно, если бы не эхо от микрофона, очень отталкивает, т.к. надо постоянно сидеть и вслушиваться в слова. Учтите пожалуйста.
@user-fv6rm8rn9y
@user-fv6rm8rn9y 2 ай бұрын
Спасибо за понятный гайд🤩
@kem0n
@kem0n 3 ай бұрын
Первые 10 минут вообще огонь, потом скукота
@MikhailVakhmenin
@MikhailVakhmenin 3 ай бұрын
Добрый день! Какие плюсы и минусы у контроля качества данных через инструменты БД/SQL (constraint / check) и через DBT?
@alex-on-data
@alex-on-data 3 ай бұрын
SQL constraints и DBT Test это разные системы для разных задач. Констрейнты - для транзакционного энфорсмента схемы. DBT Test - для проверки качества данных уже после загрузки данных для формирования пайплайна. То есть констрейнт проверяет целостнось данных по факту загрузки данных в таблицу вставки. DBT Test проверяет данные для того чтобы неверные данных не залились уже в следующую таблицу по пайплайну. Ну и в некоторых аналитических БД констрейнтов просто нет. А DBT Test можно везде сделать.
@SPILBERG-FILMS
@SPILBERG-FILMS 3 ай бұрын
Полезное видео про кубер. Видно, что команда постаралась сделать крутое качество при создании вебинара.
@mikhailalexandrov8386
@mikhailalexandrov8386 3 ай бұрын
Спасибо за интересное и полезное видео! Подскажите как интегрировался dbt с airflow в примере вебинара? Как настроить ?
@user-dn3df6gx3y
@user-dn3df6gx3y 4 ай бұрын
Здравствуйте. А где про отель кейс?
@smbsmn324
@smbsmn324 4 ай бұрын
Неожиданное обоснование использования найфай на проекте.
@Bubliiiiik
@Bubliiiiik 7 күн бұрын
Нормальное обоснование) если есть экспертиза и инструмент работает, зачем тратить ресурсы на внедрение другого инструмента
@mashagataulina8516
@mashagataulina8516 5 ай бұрын
Абсолютно бесполезное видео, где лектор чисто для галочки выполняет поставленные ему в рамках работы задачу - записать видео по курсу, ну и сделал как будто бы для себя по быстренькому. Где то как то написал приложуху, развернул ее - готово и курс готов. Смысл это выкладывать как официальное видео курс по вк клауд платформе для клиентов. Бессмысленно...
@darianperez1463
@darianperez1463 5 ай бұрын
интересный проект. каков срок разработки и реализации?
@elizavetaplatonova6427
@elizavetaplatonova6427 6 ай бұрын
Видео начинается с того, что "у нас имеется виртуальная машина, на которой установлен докер, на этой вм есть папка с приложением и нам надо собрать образ этого приложения" - и как выполнить все эти шаги? почему нельзя было включить их в видео? получается, без этого я выполнить урок не могу, надо либо самой сидеть разбираться, либо просто забить
@abask09
@abask09 6 ай бұрын
"занимает достаточно быстрое количество времени.."?!🤦‍♂️
@adminuPcu
@adminuPcu 8 күн бұрын
😂😂😂😂😂😂😂 русская речь не для них))))
@user-jv1mb5tp8q
@user-jv1mb5tp8q 6 ай бұрын
у вас русских слов не хватает чтобы описать продукты?
@user-ru6qe5hi2n
@user-ru6qe5hi2n 7 ай бұрын
Какая чушь. Пока не было этих «эффективных менеджеров» на ВАЗе все было хорошо.
@user-oe4kt6vv6s
@user-oe4kt6vv6s 7 ай бұрын
Начало с 14:26
@user-dg8yk1by9c
@user-dg8yk1by9c 7 ай бұрын
Облако для аналитики дешевле только при условии, если ресурсы для вашего проекта требуются не всегда, а по запросу. Например, вам надо посчитать аналитику раз или несколько раз в день по данным в облачном s3. Тогда, да, это будет выгодно. Но посмотрите на кластеры хадуп, которые считают аналитику 24/7/365. Вы верите в то, что переехать в облако для них будет дешевле? Я, например, не верю... На тему производительности. В продакшн кластере хадуп, если посмотреть в логи спарк, локальность минимум на уровне стойки или датацентра, а в 30-40% случае - на уровне ноды. Тут все, конечно, может быть индивидуальным для вашего проекта. Но для связки кубера и s3 никакой локальности скорее всего не будет, даже на уровне датацентра. Поэтому, я не верю в просадку 4-5% по времени расчетов на одинаковом железе. Хоть это и "вилами по воде", но я бы говорил про потери производительности на уровне 15-20%. Соответственно, для получения того же времени выполнения расчета потребуется больше ресурсов, что в конечном итоге выльется в дополнительные расходы за компьют. Опять же, вот мы говорим про выбор между on-premise и облаком. Тогда почему мы не задаем вопрос, а жива ли Terradata или Greenplum? И мы почему-то не задаем вопрос, а жива ли Kafka? В определенных облаках для всего этого уже давно есть альтернатива. Впрочем, как и для самого кубернетеса, как уже написали в комментарии к этому видео. Выбор между облаком и on-premise не всегда однозначный даже для среднего бизнеса, а для крупного зачастую выгоднее построить свое частное облако, чем уехать в чье-либо. Пока что облака - это все-таки очень дорого, они больше подходят стартапам, малому и части среднего бизнеса. И про s3 в сравнении с hdfs тоже хотелось бы добавить. Вы можете назвать из всех имеющихся на рынке распределенных файловых систем что-то столь же надежное, простое и уже изъезженное вдоль и поперек как hdfs? Если скажете, что Ceph - я скорее улыбнусь. У того же амазона или gcp в s3 вложен колоссальный ресурс, это все на сегодня уже внутренняя разработка каждого серьезного облачного провайдера. В совокупности с erasure coding получается дешевый продукт для клиента и в тоже время с долгосрочной моделью окупаемости для самого облачного провайдера. А есть ли что-то подобное внутри РФ? Ну может у яндекса... Но я бы не понес свои данные в Ceph, не будучи уверенным, что его как следует "залатали" и умеют "правильно готовить".
@MrKMV34
@MrKMV34 7 ай бұрын
Когда будете создавть кластер, то обязательно в "Доверенные Docker Registry" добавьте ip:port registry, который создали/используете в ходе выполнения курса
@prtvru
@prtvru 8 ай бұрын
Воруют всё и я перестал создавать продукты которые только через лет 10-15 начнут появляться
@prtvru
@prtvru 8 ай бұрын
👍😎
@VasYa
@VasYa 8 ай бұрын
Снова я со своей обратной связью(если её ктото читает вообще). Вот эти моменты, когда лектор чето быстро набирает(по ошибке ли или по другой причине) - и совсем без комментариев голосом очень фрустрируют меня как зрителя - что там происходит, нужно ли мне это разбирать или это исправление ошибок того, кто дает материал, или это то, что мне потребуется повторить на моей тестовой машине - как это понять если ранее не работал с этими инструментами?
@VasYa
@VasYa 8 ай бұрын
Лайк
@VasYa
@VasYa 8 ай бұрын
Это классно, но местами не понятно, например, в моменте как прокидываются переменные с логином-паролем. Я только изучаю эти темы потому возможно не улавливаю)
@VasYa
@VasYa 8 ай бұрын
С середины видео становится мало понятно что делает спикер:( под конец конечно понятней стало, но как будто объяснял сначала одну тему, потом резко пошла консоль и непонятные телодвижения
@tonick74
@tonick74 8 ай бұрын
а как быть с данными в БД, как они для дева и для каждого разраба накатываются? Сколко весят базы?
@dxlebedev
@dxlebedev 9 ай бұрын
Спасибо
@aksakal681
@aksakal681 9 ай бұрын
Прслушал первые 10 минут. Кошмар. Автор очень слаб в системной архитектуре и весьма косноязык.
@nasirenevoylune3113
@nasirenevoylune3113 6 ай бұрын
а кто лучше тему раскрывает? Кого почитать/послушать?
@user-fy5wl6nx6z
@user-fy5wl6nx6z 10 ай бұрын
решил попробовать Vk cloud запустил туториал. При запуске client.create_endpoint(name="my_test",performance="low") выдал ошибку ERROR: [409 Conflict] "Conflict occurred attempting to store trust - Duplicate entry.\"
@user-sk4je6cx1z
@user-sk4je6cx1z 8 ай бұрын
получилось решить эту проблему?
@user-fy5wl6nx6z
@user-fy5wl6nx6z 7 ай бұрын
@@user-sk4je6cx1z Да , начните с чистого листа ,после запуска инстансов поменяйте ресурсы на 2cpu-2gb. VK есть ограничения на количество cpu в старте ( 8 CPU ) что ли , старт Jupiter берет 4 старт MLflow ещё 4 и все он не одет создать деплой, не куда . Поэтому на инстансе ставим на все после запуска 2cpu 2gb, а также после старта MLflow deploy при performance=low он берет 4 CPU, запускаем его на low, а потом заходим в его инстанс и меняем на 2 CPU
@user-bp3wq8ky1z
@user-bp3wq8ky1z 10 ай бұрын
Как можно получить ноутбуки из видео с примерами?
@user-pr9bx4wz5g
@user-pr9bx4wz5g 10 ай бұрын
Не с первого раза, но победа все пришла) очень круто!!!
@AnimalBrutals
@AnimalBrutals 11 ай бұрын
👍