Оптимизация Django. 5 - Celery + Docker

[@ClinKZKZKZ]

Для того чтобы не писать "docker compose run --rm web-app sh -c", лучше как мне кажется воспользоваться командой "docker compose exec web-app python manage py и т.д." которая работает внутри текущего контейнера выбранного сервиса, не создавая новый контейнер. При этом контейнер остается запущенным.

[@РодионМауленов]

пересматриваю второй раз твой курс. Привет с Украины отлично обьясняешь, прям шикарно. Даже я бы сказал так, ты пишешь код так грамотно, что мне не приходится задавать вопросы и само собой понятно, плюс ЮнитТесты, это бомба ! Сейчас заканчиваю просмотр Бекенд на Джанго и перехожу к Оптимизации на Джанго

[@SeniorPomidorDeveloper]

Привет! )

[@Alekseyild]

Ещё давно пытался разобраться с celery и redis. Почитал доки, вроде запомнил определения, но толком не мог понять как и зачем это всё работает. Теперь всё понятно стало)

[@SeniorPomidorDeveloper]

👍

[@MrSunTrope]

Как же круто, и понятно спасибо большое

[@markostr]

Огромное спасибо за Ваш прекрасный курсю Вы сэкономили мне много времени ! Здоровья и удачи ! Привет из Франкфурта.на Майне !

[@SeniorPomidorDeveloper]

Спасибо! Привет вам и Франкфурту )

[@nurkenspashev]

спасибо, крутой. я сразу подключил worker к себе в проект) спасибо большое 🙏

[@КотьКотеевич]

Спасибо за очень хороший пример, а то я уже мозг изнасиловал кривой документацией

[@Максим-ш3ч6м]

Возможно при разговоре про параллельность и асинхронность нужно небольшое пояснение. Можно использовать три концепции: Celery, async view в джанге и просто помещение задачи в очередь. И вот нужно понимать что для чего используется А то тема асинхронности в джанге это уж очень непросто

[@SeniorPomidorDeveloper]

Ну да, я вначале говорил что асинхронные вью это другое . А селери задачи было бы точнее назвать параллельными . Я вижу только два варианта. Асинхронное выполнение в другом потоке , либо асинхронное выполнение в другом процессе , и по сути уже не важно , на этом сервере он запущен или на другом .

[@koshakpoc2876]

@@SeniorPomidorDeveloper как вы относитесь к конкурентному выполнению внутри одного потока? Недавно прочитал книгу про конкурентное программирование на питоне И сложилось ощущение что за такими фреймворками как aiohttp или fastapi будущее Как вы думаете ?

[@SeniorPomidorDeveloper]

Очень хорошо отношусь, определенно за ними будущее. Также Джанго , начиная с 4 версии поддерживает асинхронные view и queryset. Но нужно понимать, что с точки зрения инфраструктуры, это просто способ экономии ресурсов. Конечно, очень эффективный и нужный для высоконагруженных проектов. Но по сути, я не вижу других выгод. Поддерживать такой код, очевидно , будет сложнее . Тем более дебажить. Если для проекта достаточно поднять несколько воркеров и так он будет выдерживать необходимую нагрузку, я думаю что этим и нужно ограничиться . Если у нас много вычислений или очень много запросов и асинхронный код нам как-то значительно удешевит инфраструктуру - это стоит делать. Иногда даже стоит обратить внимание на golang или другие решения . А для стандартного сайта на Джанго, возможно, игра не стоит свеч.

[@koshakpoc2876]

@@SeniorPomidorDeveloper понял, спасибо большое за ответ! В книге было про функции Джанго async_to_sync и sync_to_async В примерах в контроллерах функциях все равно делали логику с помощью aiohttp Ничего не понял, но очень интересно)

[@SeniorPomidorDeveloper]

😁

[@5ov4-94]

Так-же можно вместо двух команд "docker-compose build" и "docker-compose up" написать одну "docker-compose up --build".

[@BorisenkoV89]

Спасибо

[@ibrahimoglu]

👍

[@ВладиславМізера]

Дякую!

[@jamjam3337]

спасибо!😎

[@weyzem]

А зачем делать 2 одинаковых билда? Надо делать image: :latest Где name - это название образа твоего джанго проекта

[@dodokwak]

Эх, докер конечно нужен. Без докера у меня получилось без проблем сделать демона из редиса, но с селери к сожалению нет. Теперь вижу, что при расширении функционала ( тот же flower) докер сильно помогает.

[@SeniorPomidorDeveloper]

Согласен. С ним проще намного

[@marshal33311]

Что делать если таски получают статус RECEIVED?

[@napylov2042]

Во-первых спасибо большое за крутой контент! Подскажите пожалуйста. Сделал небольшой проект django + celery + rabbitmq. Упаковал все в докер файл и написал docker-compose. При билде и запуске заметил, что Docker Desktop ест очень много оперативки и очень много памяти SSD диска на котором установлена ОС (Windows) порядка 15-20Гб. Это нормально или я как-то не правильно запускаю/собираю проект?

[@SeniorPomidorDeveloper]

Рад что контент понравился. На оперативку там надо ставить лимит в настройках Docker Desktop. По идее ему не нужно много с такой конфигурацией. На счет диска не помню, тоже вроде настойка есть, я удалил докер, негде посмотреть) но по идее каждый image и каждый контейнер что-то весит. Можно еще у нас в ТГ группе спросить, ссылка в профиле

[@napylov2042]

​@@SeniorPomidorDeveloperспасибо за оперативный ответ! Действительно, надо будет посмотреть настройки в докере, возможно там проблема.

[@pg_7v]

Спасибо, за курс и видео, очень познавательно и понятно! Два вопроса которые нагуглить не получилось, если позволите. 1) нужно ли чистить Redis от очереди задач, или как происходит удаление задачи которую celery отрабатывает/отработал? 2) Когда запускается выполнение задачи, лишь один инстанс существовал на каждого пользователя? Можно и в коде ограничить, а в настройках celery это как то предусмотрено?

[@SeniorPomidorDeveloper]

1) задача будет храниться пока ее не заберет воркер, потом он ее удалит, как только заберет. Если ее не заберет никто, то я думаю что она исчезнет по тайм-ауту, это очень популярная практика, будет про это в видео про redis дальше 2) я не очень хорошо понял вопрос, но я думаю что в завтрашнем видео будет это решение, если я правильно понял. Если не найдете его там то напишите мне еще раз.

[@СыймыкЖакшыбаев-л6к]

Здравствуйте, во первых спасибо за курс. Надеюсь будет уроки на авторизацию и регистрацию с использованием jwt токенов, с подтверждением через email или телефон??? Я в русско язычном сегменте не мог найти нормальных примеров...

[@SeniorPomidorDeveloper]

Возможно. Но поищите еще в англоязычном сегменте

[@СыймыкЖакшыбаев-л6к]

@@SeniorPomidorDeveloper Хорошо, спасибо большое. Сделайте пожалуйста, подробный видео урок про авторизацию и регистрацию в Django rest framework. Какие варианты обычно используют на практике, какие виды существует, с использованием jwt токенов, email подтверждение или подтверждение через номер телефона и.т.п Мне кажется это один из важных пунктов в backend разработке. Ещё раз спасибо, большой привет из Кыргызстана 🇰🇬🇰🇬🇰🇬

[@SeniorPomidorDeveloper]

Кое-что было в курсе с синей обложкой “бекенд на Django” часть 2 OAuth . Но может еще сделаю по jwt. Привет Кыргызстану!

[@shinbatsu5465]

Видел что-то касаемо этой темы у selfedu в курсе "Уроки по Django REST Framework". 14 урок, возможно это поможет

[@bernardsoul8936]

По какой-то причине, если я редактирую docker-compose, потом не запускается docker пока не удалю контейнеры и образы, и снова не поведу миграции. Сам билд проходит без ошибок, но вот при docker-compose up вообще не ап) ругается... При этом контейнеры создаются. Приходится всё удалять (образы, контейнеры) и соответственно заново заполнять бд, думаю это не так должно работать=) Если кто знает, подскажите в чем может быть проблема?

[@SeniorPomidorDeveloper]

Может кто-то в тг чате подскажет, ссылка в профиле

[@bernardsoul8936]

@@SeniorPomidorDeveloper пойду спрашивать

[@VaniaKazeko]

Извините, возможно я немного не понял, но разве celery_app не нужно прописывать по пути service/service, там и __init__ есть, заранее спасибо за разъяснение

[@SeniorPomidorDeveloper]

Может быть нужно.. по разному делают

[@VaniaKazeko]

@@SeniorPomidorDeveloper спасибо

[@ДмитрийПл-ц8в]

Спасибо за видео! А будет деплой в докере? С настройкой сервера?

[@SeniorPomidorDeveloper]

Пока не планируется

[@ДмитрийПл-ц8в]

@@SeniorPomidorDeveloper спасибо за курс, много полезного приобрел!

[@MEZENchannel]

Привет. Подскажите пожалуйста, на макбуке м1 макс можно работать с с# и юнити ?

[@SeniorPomidorDeveloper]

Можно. Я работаю с Unity и C# на своем маке M1

[@MEZENchannel]

@@SeniorPomidorDeveloper Спасибо большое за ответ

[@LinkstaRuViews]

Минут пять бесполезной болтовни, которую можно уложить в минуту в момент практики.. О боги.. Еще и подсматривает постоянно, что говорит о том, что до старта видео он не прогонял ничего из того, о чем говорит.