ТРАНЗАКЦИИ И БЛОКИРОВКИ ПРОСТЫМ ЯЗЫКОМ

  Рет қаралды 28,637

Ваня Ио про разработку

Ваня Ио про разработку

Күн бұрын

Пікірлер: 89
@ivangolang
@ivangolang Жыл бұрын
Записи реальных собесов и полезную инфу для подготовки можно найти на бусти boosty.to/vanyaio Тренажер по Go для подготовки к собесу: stepik.org/a/206788 Задачи на горутины и каналы Go для собесов: stepik.org/a/207625 Офф. дока по теме: www.postgresql.org/docs/current/transaction-iso.html www.postgresql.org/docs/current/explicit-locking.html Много хороших примеров в книжках: postgrespro.ru/education/books/internals глава про изоляцию Книжка с кабаном - designing data-intensive applications - глава 7 про транзакции
@adwawdwad2499
@adwawdwad2499 Жыл бұрын
Read uncommitted - это не аномалия, а уровень изоляция. Dirty read - это аномалия.
@flower-py
@flower-py Жыл бұрын
Ты очень крутой, спасибо. Читал книжку с кабанчиком, и твоё видео гораздо нагляднее, особенно с примером про докторов. Счастья и здоровья тебе на всю нафиг жизнь ❤
@cintock
@cintock 8 ай бұрын
В этом видео понятно, для примера баланс как число в таблице хранится. Когда храним финансовую информацию более правильно ее представить в виде истории изменения баланса. То есть приход 100 рублей, списание 5, приход 2. А баланс получать (рассчитывать) как сумму +100 - 5 + 2. Меньше вероятность запортить данные, чем хранить просто как значение в ячейке. И в случае проблем, легче разобраться в причинах и восстановить.
@alekseysverbeev2934
@alekseysverbeev2934 8 ай бұрын
я не сталкивался, но делал бы 2 таблицы - одна с логом, другая с агрегирующим значением по этому логу
@dshyryayev
@dshyryayev Ай бұрын
Супер! Спасибо за такую качественную инфомрацию! Я тоже помню как долго разбирался с этим, но никогда наглядно не демонстрировал таким образом! Молодец автор!
@niknt
@niknt Ай бұрын
Это одно из самых полезных видео по уровням изоляции транзакций. Большое спасибо! 🎉
@ZeBatua
@ZeBatua 7 ай бұрын
Отличный материал, только в конце про SERIALIZABLE я бы добавил, что он конкретно так лочит таблицу, из-за чего падает производительность, но зато все транзакции идут последовательно.
@kuznet1941
@kuznet1941 Ай бұрын
Не все так просто. Цитата: Для полной гарантии сериализуемости в Postgres Pro применяются предикатные блокировки, то есть блокировки, позволяющие определить, когда запись могла бы повлиять на результат предыдущего чтения параллельной транзакции, если бы эта запись выполнялась сначала. В Postgres Pro эти блокировки не приводят к фактическим блокировкам данных и, следовательно, никоим образом не могут повлечь взаимоблокировки транзакций. Они помогают выявить и отметить зависимости между параллельными транзакциями уровня Serializable, которые в определённых сочетаниях могут приводить к аномалиям сериализации. Транзакции Read Committed или Repeatable Read для обеспечения целостности данных, напротив, должны либо блокировать таблицы целиком, что помешает пользователям обращаться к этим таблицам, либо применять SELECT FOR UPDATE или SELECT FOR SHARE, что не только заблокирует другие транзакции, но и создаст дополнительную нагрузку на диск.
@alex-0x6b
@alex-0x6b Жыл бұрын
Про Serializable для меня вообще было открытием. Спасибо!
@DmitriyVassilyev
@DmitriyVassilyev 6 күн бұрын
Отлично рассказал. Спасибо.
@borymskyi
@borymskyi Жыл бұрын
Годный осмотр транзакций. Контент зайдет для всех кто пишет бек, неважно на каком языке. Особенно круто что прошёлся по локам, кстати советую ещё зрителям посмотреть какой то более конкретный пример с локами, например как обновляется одна строка в бд при конкурентном доступе от Реста и от Брокера. И почему в такой ситуации круто подходит Лок а не другие способы по типу siriazible
@sergeyplotnikov4303
@sergeyplotnikov4303 9 ай бұрын
Супер! Большое спасибо! Очень понятно с отличными наглядными примерами!
@Atikan37
@Atikan37 4 ай бұрын
Спасибо большое, все кратко и по делу! Восхитительно!
@cfirfbbg4344
@cfirfbbg4344 8 ай бұрын
Лайк за Хана. Какой же кайф
@aleksandrzaremba6520
@aleksandrzaremba6520 Ай бұрын
Красавчик! Все по полкам раскидал, были бы такие преподы в универах
@МаксимИващенко-л5о
@МаксимИващенко-л5о 6 ай бұрын
Как же жить стало проще когда узнал про SERIALIZABLE ISOLATION Успехов ))
@oksigenoksi
@oksigenoksi 10 ай бұрын
Это лучший материал про уровни изоляции и аномалии! Респект!
@VoroN93Rus
@VoroN93Rus Жыл бұрын
Спасибо, интересно. Единственное не рассказал как базу на работе локнул 😅
@Angelisme1995
@Angelisme1995 8 ай бұрын
Спасибо! Очень классно и наглядно показано
@Hairy89pro
@Hairy89pro 5 ай бұрын
Пересмотрел дважды, пробежался по всем примерам руками, бро, обожаю тебя😅
@eugenenazirov
@eugenenazirov 10 ай бұрын
Идеальное видео с качественными примерами. Красавчик!
@КоньЛюдоед-ф6ф
@КоньЛюдоед-ф6ф Жыл бұрын
Ух огромное спасибо) отличный ролик. очень доступно объяснил
@dreamer_vi905
@dreamer_vi905 4 ай бұрын
Спасибо за классный контент! Твои 3 дня потраченные на видео прошли не зря)
@sugukha
@sugukha 24 күн бұрын
услышал подкрадули, подписался)
@yashkevich8164
@yashkevich8164 Жыл бұрын
Самое смешное что решать эти проблемы требуется только в определенных предметных областях в программировании. А спрашивают везде, даже когда сами все используют по умолчанию настройки. Не только лишь всем понадобится решать такие проблемы, а ограниченному кругу разработчиков. Тоже самое касается про репликацию и шардировние, никто не реализовывал, но спрашивает
@kuznet1941
@kuznet1941 Ай бұрын
Причем это не только про базу данных.
@MrSunchezz
@MrSunchezz 8 ай бұрын
Спасибо! Весьма полезно.
@peteris6992
@peteris6992 3 ай бұрын
Спасибо тебе, Кристиан Бэйл
@SemyonF89
@SemyonF89 Жыл бұрын
Это база(с) Спасибо. Исчерпывающий гайд.
@bobhutchinson3638
@bobhutchinson3638 3 ай бұрын
это лучшее объяснение
@viktorz1986
@viktorz1986 Жыл бұрын
"Третий день пишу видос, сам не рад, что начал" - здесь улыбнулся. Делаешь ролик на 5 минут - 80 тыщ просмотров, три дня - 300 просмотров и все от бабушки. Посмотрел ролик 3 раза, чтобы тебя поддержать. Хорошее видео.
@vlad_issslove
@vlad_issslove Жыл бұрын
Крутой тутор! Случайно наткнулся на канал, коммент для продвижения)
@pocketpodpopcorn
@pocketpodpopcorn 28 күн бұрын
Я один против мира - Александр Гоголев
@foobarspam8548
@foobarspam8548 Жыл бұрын
Лайк за Хана Замая!!!!
@bobhutchinson3638
@bobhutchinson3638 3 ай бұрын
шикарный пример
@ЯковЛазоренко
@ЯковЛазоренко 9 ай бұрын
Толково изложено! В MySQL лост апдейты тоже (как и в постгресс) невозможны на уровне "repeatable read" ?
@vova_dev
@vova_dev 6 ай бұрын
Классно, спасибо!
@userqh67vey6
@userqh67vey6 Жыл бұрын
Полезное видео. Лайк за видос.
@egorzrobko8053
@egorzrobko8053 Жыл бұрын
Топовое видео, спасибо большое
@chefirka.
@chefirka. Жыл бұрын
Очень интересно и полезно, спасибо большое!!!
@andreikhotko5206
@andreikhotko5206 Ай бұрын
Примеры транзакций хорошие, и тема классная, спасибо! Хотел бы немного дать рекомендаций, что можно тут улучшить. 1) Хотелось бы с первых минут знать, на примере какой СУБД рассматриваются транзакции, прежде чем приступать к примерам запросов. 2) Как-то очень абстрактно рассказываешь, не расскрывая деталей. Пишу после просмотра первых 5 минут. Про изолированность транзакций было сказано что-то вроде "транзакции с одного терминала не видят транзакции с другого терминала". Звучит как-то непонятно. А что означает тут слово "терминал"? Мне кажется, более приближенный к практике пример - это не 2 терминала, открытые на одной машине в vscode, а 2 пользователя / приложения, подключённые к одной базе. Понимаю, что контент может быть для тех, кто только начинает изучать эту тему, но хотелось бы, чтобы информация подавалась чуть более подробно, если это возможно. Возможно дальше и раскроется тема. Если раскроется - удалю коммент Без негатива, успехов в развитии канала
@gera5458
@gera5458 Жыл бұрын
Очень годно, продолжай в том же духе!
@llwebstylell242
@llwebstylell242 7 ай бұрын
Снимай видосы, интересный материал
@Иван-д1д2б
@Иван-д1д2б Жыл бұрын
очень полезный видос, спасибо!
@palach_666
@palach_666 9 ай бұрын
Все видео, я хотел дать тебе баночку энергетика)
@javalexiy
@javalexiy 7 ай бұрын
Иван, поясни пожалуйста про ретрай запросов? Можешь раскрыть тему, как это делается?
@НиколайПлегунов
@НиколайПлегунов 3 ай бұрын
Не понял в seriaizable , ты говоришь что может даже не существует строки для блокировки. Но утаблицы есть room id (остальные понятно nil), и по этой же room id оно понимает что что-то происходит и включает блокировку. То есть это происходит именно по всей колонке, тогда можно сказать что вся таблица блокируется? Или если действительно пустая страница, я создам в нескольких окнах новые данные, как распрнделяться id новых записей? Спасибо за видео!
@cheapdramas313
@cheapdramas313 2 ай бұрын
может я не прав, но как мне кажется что для ситуации на 21:52 не нужна блокировка совсем, так как по логике прога увидит сразу что остался один врач, и роллбекнет транзакцию
@bilorus-marschak
@bilorus-marschak Жыл бұрын
Топ контент!
@Драугр
@Драугр Жыл бұрын
Лайков за Замая...
@Boyarsskiy
@Boyarsskiy Жыл бұрын
Все это нужно в очень редких кейсах, но в рф любят почти на каждом собесе поумничать. В реальном мире в 99% случаев это не нужно, так как все решается настройками по-умолчанию. Когда действительно сталкиваешься, то читаешь доку, вспоминаешь, и потом снова забываешь. Это как дедовщина в армии: видать одного замучили на собесе, он поклялся все это выучить, и потом других мучить ))) Был и у меня на работе такой умник. Когда его спрашивали свои же, зачем ты это все спрашиваешь? Он отвечал, что ему интересно понаблюдать как человек мучается и выкручивается. Редкий говнюк был, видать в школе хорошо огребал. Когда же возникали проблемы на бэке, сам же лез в доку и там вкуривал как в той или иной БД транзакционность реализована, какие уровни изоляции поддерживаются и т.д. Ну а так, хорошо всё показал. Молодец!
@olgababoshina-rj4us
@olgababoshina-rj4us Жыл бұрын
А можно вернуть кринжовую музыку? Это единственное, что мне близко из темы твоего канала😘😘😘😘😘
@SemenP-i4x
@SemenP-i4x Жыл бұрын
Bro, snimau svou treugolky. Spasibo
@ЯковЛазоренко
@ЯковЛазоренко 9 ай бұрын
В примере про случай когда блокировки не спасают: если там установить уровень read commited, то вроде как проблема решится. Или нет?
@p0isonspear
@p0isonspear 5 ай бұрын
лост апдейт попадает под класс неповторяющегося чтения? Ведь когда делается апдейт, значение читается, над ним производится операция, новое значение записывается
@maximderevnin6646
@maximderevnin6646 6 ай бұрын
В последнем примере с serializable можно поставить блокировку на строку из таблицы room по room_id и все будет ок без serializable. Или я не прав?
@ПолинаПомогаева-е9ж
@ПолинаПомогаева-е9ж Ай бұрын
Попробовала сделать запрос с serializable в другой транзакции параллельно но для другого room_id и все равно постгрес ругается на read/write зависимость
@zicksu2142
@zicksu2142 7 ай бұрын
Иван, спасибо за видео, но его нужно переснимать. В процессе просмотра было несколько неточностей. Одна из них кем-то упоминалась в коментах, что мол read uncommitted это не аномалия, а название изоляции. Про другие не вспомню сейчас, т.к. в несколько заходов смотрю видео. Причиной для того, чтобы перезаписать видос, на мой взгляд, является то, что на 15:10 ты говоришь что изоляция repeatable read избавляет от фантомного чтения. Это не так. Repeatable read имеет самое кричащее название (имхо) и гарантирует (внезапно) то, что чтение строки будет повторятся (но не количество строк). Фантомное чтение - это аномалия которая невозможна только на Serializable уровне. Т.е. если на repeatable read 2-ая транзакция изменит данные в рамках одной строки, то ок (1-ая транзакция их не увидит при повторном чтении, аномалия с неповторяющимся чтением не воспроизводится). Но если 2-ая транзакция изменит количество строк (обновит/удалит), то 1-ая транзакция (при повторном выполнении того же самого селекта) должна увидеть добавленные/удаленные строки. Это и есть фантомное чтение, которое не обеспечивается repeatable read-ом.
@ivangolang
@ivangolang 7 ай бұрын
Откуда эта инфа? Офф дока постгреса про phantom read на уровне Repeatable read - Allowed, but not in PG
@ivangolang
@ivangolang 7 ай бұрын
Про dirty read / read uncommitted - абсолютно минорный момент как назвать ситуацию, что вы читаете незакоммиченные данные. Коммента достаточно, что я не общепринятый термин случайно сказал.
@zicksu2142
@zicksu2142 7 ай бұрын
@@ivangolang да, верно. Прошу прощения. Как-то упустил что видос исключительно про pg, думал в целом так сказать академический подход
@vladddd1380
@vladddd1380 3 ай бұрын
ЗАМАЙ 2024
@tier61wro
@tier61wro 5 ай бұрын
нравятся твои видосы, но тут ты прям уже погас к середине видоса, похоже и правда с похмела) бросай ты это дело, а видосы снимать продолжай)
@raphaelpashaev6683
@raphaelpashaev6683 Жыл бұрын
лайк с нулевой
@p0isonspear
@p0isonspear 5 ай бұрын
"на уровне репитабл рид бывает только два типа аномалий" - а как же фантомы? несогласованное чтение разве не попадает под класс фантомы? когда доктор боб хочет уйти он видит двоих на дежурстве. А когда снимается с дежурства, делая апдейт уже видит неявно одного себя. Алиса ведь себя уже закоммитила
@sander1614
@sander1614 Жыл бұрын
И что делать, когда транзакция зависла из-за другой неоконченной транзакции?
@codebrainy6246
@codebrainy6246 9 ай бұрын
Есть настройка у постгреса скок максимум можно висеть, если время превысится - ролбекнет
@OREH88
@OREH88 10 ай бұрын
Транзакции Антихайпа
@kl45gp
@kl45gp 2 ай бұрын
примеры не очень, нафига жестко ставить баланс на счету? не честно получается, надо было с одного вычитать величину , а на другом туже прибавлять, тогда хоть и тоже все сломалось, но так честнее
@YanchikDev
@YanchikDev 8 ай бұрын
Race condition?
@kibarabara
@kibarabara Жыл бұрын
Привет горшочку!
@kibarabara
@kibarabara Жыл бұрын
Да ббббббддддддддддддджжддддддддддддддщджддщдддддддддддддджждщддббббббббббббдддббщддлоо научить ь. Юююююжжюююэээ!э!.!
@kibarabara
@kibarabara Жыл бұрын
Ь. Ьььььллллллллддллл. Ьььььлллллббббббэ
@777ElfenLied777
@777ElfenLied777 Жыл бұрын
7:26 - а в чём тут парадокс? Разве транзакция это не инструкция, описывающая что нужно сделать с актуальными данными базы? Я просто новичёк, не знаю нюансов ещё. Или после begin предполагается, что мы должны работать с изначальным состоянием базы, не беря во внимание последующие её апдейты? Просто в примере вроде всё логично: после первой транзакции у Alice на балансе 2, а у Bob 998. Вторая транзакция выполняет инструкцию установить для Alice значение 998, а для Bob прибавить 2 и прибавляет к его текущему значению, которое равно 998.
@pyramidhead9692
@pyramidhead9692 Жыл бұрын
А почему актуальными? Коммит второй транзакции не произошел еще. Апдейт бы брался во внимание, если бы изменения эти были в одной транзакции, а не в разных. В postgresql в момент открытия команды begin при уровне repeatable read, строится так называемый "снимок данных". С помощью этого снимка в postgresql как раз и избегается аномалия неповторяющегося чтения.
@TAF3000
@TAF3000 22 күн бұрын
@@pyramidhead9692 когда идёт 3-й апдейт, после коммита, там лежат актуальные данные у Alice 2 рубля!!! И не верно ей ставить просто 998! тут даже без транзакций будет ошибка
@BYGUR
@BYGUR 10 ай бұрын
Для чего впихивать в одну транзакцию две одинаковых операции на чтение, которые потенциально могут иметь разный результат?
@ИльяЗубков-ф8ж
@ИльяЗубков-ф8ж Ай бұрын
Первое, что пришло в голову - по разному обрабатываем данные, можем применить разную функцию при двух одинаковых чтениях одних и тех же данных
@justniktolol
@justniktolol Жыл бұрын
клад!
@ГубкаБоб-р8ъ
@ГубкаБоб-р8ъ Жыл бұрын
Может тогда по умолчанию использовать уровень изоляции SERIALIZIBLE? Для чего нам тогда другие уровни изоляций, если они не дают гарантированной защиты от аномалий?
@VitaliyZlobin
@VitaliyZlobin Жыл бұрын
Есть уровни изоляции и аномалии при них. Чем ниже уровень - тем больше аномалий, но и производительность системы выше. Ты, как разработчик, должен решить, какого уровня будет достаточно для твоей системы, без избыточной изоляции. При уровне SERIALIZIBLE говорить о параллелизме не приходится, это прям из названия следует - транзакции просто выполняются последовательно по очереди.
@lelelelevv
@lelelelevv Жыл бұрын
Бывает, когда нам не нужны гарантии выполнения транзакции. А работу нужно ускорить. Например, логи записываешь. Ну не страшно, если что-то там не зафиксируется и на графике подведения итогов будет вместо 159384 записей 159383. Общей картины это не меняет. А записи частые и стоит побыстрее заталкивать. Вот и придуманы способы.
@zakharka3938
@zakharka3938 9 ай бұрын
@@VitaliyZlobin Serializable это не про реализацию, а про результат. Более того, уже давно есть реализации serializable которые по мере возможности выполняют транзакции параллельно.
@VitaliyZlobin
@VitaliyZlobin 9 ай бұрын
@@zakharka3938 алгоритм с вложенным циклом может выполниться за O(n), однако такой алгоритм имеет сложность O(n^2). Я бы сильно не полагался, на то что там что-то параллельно может выполниться - это подкапотная оптимизация СУБД, а не твоих процессов. И где я писал, что serializable про реализацию?
@АлексейКузьмичёв-ц7о
@АлексейКузьмичёв-ц7о 8 ай бұрын
9:29 Обновил всем баланс в 0 что не так?
@nikolay4362
@nikolay4362 Жыл бұрын
блин, зря сделал += 2, лучше бы везде сделал +998 -998 а то код странно смотрится((
ИНДЕКСЫ В БАЗАХ ДАННЫХ. СОБЕС В OZON.
33:59
Ваня Ио про разработку
Рет қаралды 67 М.
Happy birthday to you by Secret Vlog
00:12
Secret Vlog
Рет қаралды 6 МЛН
бабл ти гель для душа // Eva mash
01:00
EVA mash
Рет қаралды 10 МЛН
Владимир Ситников - B-tree индексы в базах данных на примере PostgreSQL
45:18
Heisenbug — конференция по тестированию
Рет қаралды 28 М.
Зачем нужны даталейки (Data Lake)
35:59
AWS на русском
Рет қаралды 6 М.
РЕАЛЬНЫЕ ВОПРОСЫ НА СОБЕСЕДОВАНИИ ПО GOLANG
9:15
Ваня Ио про разработку
Рет қаралды 50 М.
Базы данных. MySQL. Транзакции
41:32
R class Tech
Рет қаралды 36 М.
CI/CD - Простым языком на понятном примере
15:29
Артём Шумейко
Рет қаралды 110 М.
КАК НАЙТИ РАБОТУ GOLANG РАЗРАБОТЧИКОМ
19:39
Ваня Ио про разработку
Рет қаралды 10 М.