Почему входить в IT лучше всего инженером данных

Рет қаралды 18,099

Күн бұрын

Пікірлер: 96

@Мр.Джими 7 ай бұрын

Я изучаю Python примерно год, просто смотрю что надо и дополняю, прошерстил Postgre по книжкам и видео, так же успешно забываю, Django, полез изучать Docker, дальше пошел и на GIT потерялся.... HTML CSS книжка лежит, думаю приступить к изучению, короче как в сугроб залетел, и интересно, и чет становиться не подъемно... Самое страшное что где то изучаю, а как это скрестить мало понятно... Надеюсь на ваших видео че-то все таки толковое сообразить смогу)

@TraShW00RM1488 6 ай бұрын

Совет джунам: думайте на перспективу 10 лет минимум. Нет смысла быстро выучится на тестировщика или поддержку, а потом 6 лет сидеть пердеть без перспектив. Лучше потратьте два года на обучение туда, где вам интереснее работать будет. Два года ничего не решают.

@НатальяТк-р4ю 7 ай бұрын

Спасибо за видео, это огромный труд! Изучаю

@aresb9595 Ай бұрын

Абсолютно поддерживаю! Всех друзей тащу в инженерию данных, кадровый голод дичайший, но при этом работа така что можно найти бомжа на улице помыть, постричь, по курсам sql от Карпова погонять и будет замечательный стажёр ДЕ))) Теперь буду отправлять не только к Карпову но ещё и к вам, спасибо за контент))

@digitalberd Ай бұрын

Жиза)

@hamstreet-cutehamsterstree1043 7 ай бұрын

Все, я в теме, начинаю учиться с Вами!

@CyberWare42 6 ай бұрын

в русскоязычном пространстве мало контента по DE, спасибо вам большое за ваш труд

@ЕвгенийМедведев-з5д 6 ай бұрын

Про легко странно очень звучит. Пару лет назад ходил на собесы по DE из интереса, нужно глубокое понимание как строить пайплайны данных, алгоритмы и их оценка, высоконагрузочные платформы такие как Kafka минимум и на SQL не просто селектики и джоины писать, а полноценный анализ моч делать на индексы например

@TraShW00RM1488 6 ай бұрын

Это на Джуна? Интересно куда. Меня только типы джойнов спросили и про объекты бд. Четыре года назад, правда.

@SMTDN 4 ай бұрын

@@TraShW00RM1488 Четыре года назад в любом направлении на джуна ничего не требовалось. С тех пор ситуация коренным образом изменилась

@digitalberd Ай бұрын

Алгоритмы и их оценка точно не нужны, если собеседующий не долбоёб.

@ArtemRepin-w9x 10 сағат бұрын

обидно что мат запикиваешь… с ним всегда понятнее

@valor5164 4 ай бұрын

Как можно выучить SQLAlchemy и FastAPI за пару недель?........ Тот, кто пробовал (со знанием SQL и Python), знает, что это месяц-два только понять как это всё работает минимально на практике, а по-хорошему, чтобы вникнуть и не сыпаться или лезть в гугл на каждой детали, нужно бы в реальных проектах полгодика на них оттарабанить. О чём речь вообще?..

@demona7814 7 ай бұрын

совершенно не согласна, что у инженеров данных нехватка спецов. Возможно, на уровне мидлов и выше, но джуны как всегда будут грызться за места. А вакансий на хх для удаленки без опыта штук 15, смотрела недавно

@digitalberd 7 ай бұрын

Добрый день! Вы наверняка не смотрели это моё видео: kzbin.info/www/bejne/r5Kxk5l3Zaepps0feature=shared Там я рассказываю, что джуном идти устраиваться точно не стоит. На курсе я даю знаний, с которыми люди получали офферы на мидла. Для этого необходимо пройти весь курс и сделать все ДЗ, дополнительно хорошо позаниматься SQL - просто в течении месяца каждый день задачи на SQL решать, потом накрутить 3 года опыта и устраиваться на мидла. В принципе, я готов с вами на эту тему подискутировать в рамках стрима. Если хотите - можете написать мне в телегу (контакры в описании канала) и договоримся созвониться и постримить.

@Axbd-p4i 7 ай бұрын

А какие зп у мидлов дата инженеров? @@digitalberd

@TraShW00RM1488 6 ай бұрын

Большинство лентяи и если у Джуна есть хотя бы средний уровень мотивации, это уже дает перевес по очкам. Хотя может дело в удаленке.

@avatarpw6218 5 ай бұрын

На Мидла и в бэке много вакансий 😂

@Алекс-ю6н9г 3 ай бұрын

@@digitalberdнакрутить опыт в три года. Это самый лучший совет! А если серьезно, то куда катится мир, если везде надо врать и при этом потом не ощущать себя самозванцем. Хотя подождите.... Ты соврал при устройстве на работу, а значит ощущения верны.

@YouMeNow88 8 ай бұрын

Если плохо с математикой вообще? ) Основы статистики на Степике пройти или может что ещё посоветуете? Так же по Excel надо ли углубляться или Power BI можно будет заменить?

@digitalberd 8 ай бұрын

В ЛЮБОМ случае не надо ничего дополнительного проходить. 1. Проходите 40 уроков из этого курса, делаете все ДЗ. 2. Больше ничего не проходите - сразу после 40-го занятия - делаете резюме по 41-му уроку и начинаете ходить по собесам. По такой схеме люди уже устраиваются на работу (месяца через 2-3 сделаю видос с полной статистикой по результатам)

@YouMeNow88 8 ай бұрын

@@digitalberd Просто если какие то задачки на логику начнутся на собесе чтоб прям не посыпаться) Спасибо, буду пробовать.

@digitalberd 8 ай бұрын

@@YouMeNow88 на собесе 2/3 задач будет на SQL и ещё на те проекты, которые были. Лучше ходить на техсобесы, выписывать с них вопросы, которые не смог - и уже по ним готовиться - а не пытаться подготовиться заранее...

@TraShW00RM1488 6 ай бұрын

Джунов обычно на логику и спрашивают, так как реально код они писать не умеют. Гуглите задачи, самые популярные : 8 монет, три автомата, ну и прочие автобусики в гору.

@nurikona 4 ай бұрын

Большой вам Thank you 🙂

@vladislavromanov3384 Ай бұрын

Спасибо большое за ролик. Мотивирует. Все по полочкам) У меня вопрос: я мидл+ frontend, сейчас есть ощущение, что развития особого не будет (если только не подаваться в лиды и прочее). Думаю об DE уже давно. Смогу ли я перейти в новое направление, не потеряв много?

@digitalberd Ай бұрын

1. Если свичнутесь в DE - то вам придётся в лучшем случае со 100К начинать - а то и с 80К. 2. Лучше всего идите в FullStack React + FastAPI. Говорят сейчас ещё на Node.js много людей надо. БД PostgreSQL 3. Как освоите React + FastAPI + PostgreSQL - сможете делать сайты свои, на которых предоставлять сервис по подписке (Самозанятый + ЮКасса). Делать пункты 2 и 3 можно без смены работы - в добавок сможете на основном месте вырасти (свои проекты очень бустят квалификацию и навыки)

@justerik7628 4 ай бұрын

Питон был первым языком, потом начал менять языки и направления, не зацепило. Вот вернулся к родному Питону

@sjdjjsjsjs3991 3 ай бұрын

Скажи честно, что тупой и дальше простых скриптов на питоне не ушёл

@justerik7628 3 ай бұрын

@@sjdjjsjsjs3991 вижу много счастья в твое жизни, что оскорбляешь людей в интернете, наверное никто тебя не любит и у тебя нет друзей. Для меня программирование это хобби , не более

@maulus1732 9 ай бұрын

Добрый день. Спасибо за видео! У вас нет расширенного курса на степике?

@digitalberd 9 ай бұрын

Спасибо! У меня есть курс на этом канале - с 0 и до джуна уже дошли, последние 3 занятия уже мидловые знания даю. Курс буду выпускать ещё месяц-два. В планах закончить с SQL, посмотреть как на Python работать с SQL и потом разобраться, как работать с Airflow - и всё. Как эту группу доведу - буду новую набирать на обучение - но уже за бабки) Так же даю личные уроки/консультации, но прям задорого - в группе будет дешевле.

@LudaMihko 8 ай бұрын

А как попасть не за бабки?) попробовать?

@digitalberd 8 ай бұрын

@@LudaMihko, вы можете самостоятельно учиться по курсу. Группы, как эту выпущу, буду только за бабки набирать (ютуб канал создал, чтобы денег заработать - даже в описании указал)

@minkostas7232 7 ай бұрын

Тегните когда за деньги - да 💸 @@digitalberd

@grafmalic238 4 ай бұрын

Здравствуйте. Обязательно посмотрю ваш курс, но у меня есть вопрос. Можно ли стать Ddata engineer на golang (пайтон не сильно привлекает), в этих наших интернетах говорят, что такое есть, а не то, что можно, всё же хочу прочитать ваше мнение. Заранее спасибо за ваш труд и ответ )))

@digitalberd 4 ай бұрын

Весь Data инженерский стек - это на 2/3 питон точно + потом можно в Data Science из этого выйти - там тоже везде Python в основном. Зря не привлекает - попробуйте хотя бы) Если Golang это единственный язык, на котором вы много кодите - то это абсолютно обычное дело - что пока несколько языков не освоил - на другие дико не хочется переходить. Я так когда Frontend осваливал - пол года не мог с Java Script на TypeScript перейти, хотя на нём лучше разрабатывать! Дело просто потраченного времени - месяц попишите на Python - и вас будет за уши не оттащить!

@digitalberd 4 ай бұрын

На Golang может принципиально и можно (сильно в этом сомневаюсь) - но это будет как левое ухо чесать правой рукой + будут проблемы с поддержкой вашего кода - т.к. все дата инженеры в основном работают с Python, и Airflow - фактически сейчас стандарт отрасли...

@grafmalic238 4 ай бұрын

@@digitalberd Большое спасибо за ответ, очень помогло разложить всё по полкам. ) ЯП я еще не изучаю, почему-то засосал PostgreSQL (ХЗ почему), метаюсь уже пару недель между Python и Golang, понимаю, что лучше сесть и попробовать оба, но к Golang как-то душа лежит, что ли. ). В любом случае буду иметь в виду, что питон доминирует в этой отрасли.

@dmitriyobidin6049 14 күн бұрын

Просто за бэкенд платят больше, вот и всё. + удаленка для дата инженеров всё еще скорее исключение, чем правило...

@viacheslavspitsyn2995 8 күн бұрын

Можешь привести источник статистики?

@barrydylan443 7 ай бұрын

я работаю разработчиком баз данных на oracle, будет ли мой опыт каким-то образом релевантен вакансии инженера данных или связанным профессиям (типо двх/етл разработчик)? если ну совсем никак, то что мне минимально нужно сделать для переката в любую из вышеперечисленных профессий?

@digitalberd 7 ай бұрын

Будет релевантным в том плане, что вы уже SQL на каком-то уровне знаете (но видосы, где я рассказываю по индексы и про то, как на физическом уровне всё происходит - лучше посмотрите). И надо ещё будет Python и Airflow подучить на инженера данных. Аналитиком данных вы можете хоть сейчас идти - главное про A/B тестирование почитайте и термины из маркетинга, типа LTV, ROI, CPC и т.д. Ну ещё на аналитика стоит знать немного Python, Pandas, Jupyter Notebook

@barrydylan443 7 ай бұрын

@@digitalberd гигантское спасибо за ответ

@TraShW00RM1488 6 ай бұрын

Если хорошо знаете, как и что происходит внутри бд, то это большой плюс. После этого выучить спарк или аирфлоу труда не составит.

@barrydylan443 6 ай бұрын

@@TraShW00RM1488 выучить то можно все, главное желание))) вопрос мой был скорее про то, сочтут ли рекрутеры мой опыт подходящим на вакансию или нет

@TraShW00RM1488 6 ай бұрын

@@barrydylan443 да, опыт релевантный.

@CrazYUzveR 7 ай бұрын

С каким уровнем подготовки надо заходить, Питон и SQL надо в каком объеме знать?

@alishere5558 6 ай бұрын

SQL продвинутый-экспертный. Python может и не понадобиться

@Den163 7 ай бұрын

Здравствуйте, есть желание поучится, гляну ролики на досуге)

@АлексейКоломейцев-ч2и 6 ай бұрын

Приветствую.А Python на каком уровне надо знать? Спасибо.

@sergeypashchenko2078 7 ай бұрын

звучит очень оптимистично и, возможно, легко) а если по факту, то за какой срок можно добиться уровня мидл или что-то близкое-похожее, например, в разрезе минимальный и максимальный(ну, когда очень туго)?

@sergeypashchenko2078 7 ай бұрын

и, если что, да, я понимаю, что тут не существует правильного ответа. просто на опыте, возможно. корреляция - страшная штука

@digitalberd 7 ай бұрын

Курс рассчитан на 4 месяца - если заниматься по 3 раза в неделю и ДЗ делать. Если заниматься 5 дней в неделю по 5 часов - можно за 2,5 месяца устроиться (реальный кейс - но так мало кто выдержит - и мало кто на больничном с гипсом сидит по пол года) Если лениво что-то делать - то пол года - год.

@Fredzerra2 7 ай бұрын

На каком этапе уже можно искать работу?

@digitalberd 7 ай бұрын

@@Fredzerra2 После 34 урока

@TraShW00RM1488 6 ай бұрын

Мидла дают обычно после 9-12 месяцев, если сильно дольше, то вас разводят на зп. В целом рекомендую не стесняться и после 6 месяцев ходить на собесы на разведку и называть себя мидлом. Если большинство верит, то повод об этом указать менеджеру, если вас не повышают.

@virnus1 7 ай бұрын

А что вообще делают эти ваши дата инженеры? И такой уж недобор по инженерам данных? По моему я еще не видел ни одного популярного ютюб блогера который не рекламировал бы курсы на инженера данных. А, впомнил мельком видел твой пост на Реакторе, правда даже не кликал по видео в посте и особо не вчитывался в сам пост а сейчас случайно наткнулся в рекомендациях, ну и знатно тебя мисанули местные п...ры в комментариях...

@digitalberd 7 ай бұрын

Есть такое - 0 кармы, при том что пост на 40 - просто комменты заминусили) А курс можешь глянуть - вдруг зайдёт)

@АдилетСеитбеков-д7у 6 ай бұрын

@@digitalberdмужик не обращай внимания на них. Ты все правильно говоришь. Нужно смотреть вдаль на 10 лет вперед, сфера данных будет скоро мэйнстримом как недавний бэкэнд, надеюсь этого не будет ) и мы инженеры будем в жетском спросе)

@digitalberd 6 ай бұрын

@@АдилетСеитбеков-д7у Она уже в мейнстриме) Недавно техсобесы записывал для канала - так некоторые hr сами признавались - что сейчас все аналитики данных повалили в инженеров данных - а аналитиков не осталось вообще...

@АдилетСеитбеков-д7у 6 ай бұрын

@@digitalberd ох уж этот нестабильный рыночек😆.

@SoGerrera-p8i 7 ай бұрын

Перед прохождением вашего курса требуется под учить питон и sql?

@digitalberd 7 ай бұрын

Можно подучить заранее - а можно и в процессе - если что-то будет не понятно...

@peterdunaevski7202 6 ай бұрын

Добрый день!!! Подскажите какие пэт проекты у джуна должны быть в портфолио?

@digitalberd 6 ай бұрын

Привет! Идти устраиваться на джуна можно только если вам 18 лет и нет возможности пару лет опыта накрутить. После моего курса можно попробовать на мидла устроиться. В последних уроках делаем совместно несколько дагов для Airflow - получение из API курсов валюты и погоды. Если заведёте себе гитхаб - и туда загрузите эти 2 дага - этого будет в принципе достаточно. Если очень хочется ещё что-то поделать - можете сделать парсинг сайтов через Selenium - и загрузку результатов в базу данных (например, парсить новости с главной страницы яндекса)

@Хомяк-м3н 8 ай бұрын

А если вошел в it через инженера данных на скала это тоже простой путь?)

@digitalberd 8 ай бұрын

Не очень. ИМХО, лучше в java и scala вообще не лезть.

@alishere5558 8 ай бұрын

Простой, так как интересен не сам Scala, а Spark. Для Spark хватит базовой Scala.

@digitalberd 7 ай бұрын

@@alishere5558 В Spark хватит и Python - на PySpark. Его чаще используют, чем Scala

@alishere5558 7 ай бұрын

@@digitalberd правда, но есть команды Spark on Scala only

@TraShW00RM1488 6 ай бұрын

Если со Спарком будешь работать, то сильной разницы нет. Я и скалу пробовал, и питон. Если в консалтинге работаешь, то это вообще норма. Вчера один проект с одним стеком, завтра другой. Главное основные принципы выучить.

@sjdjjsjsjs3991 3 ай бұрын

И зачем я 4 года в универе плюсы учил?

@digitalberd 3 ай бұрын

Я то же самое у себя спрашивал. Из того, что сейчас использую в работе - в ВУЗе было где-то 10%, остальное сам учил...

@DeeNiskas 2 ай бұрын

DE по вашему проще тестировщика?😂 на словах всё так просто 😊

@digitalberd 2 ай бұрын

Видос называется "Почему входить в IT лучше всего инженером данных". Тестирование - это не про "входить в IT" - это про то, когда мартышку посадили за комп и она жмёт на всё подряд...

@Magic__Man 7 ай бұрын

Будем посмотреть)😊

@dmitriyobidin6049 14 күн бұрын

7:00 Ну это лукавство. Зоопарк технологий в дата инженерии будь здоров, еще фронденд современный позавидует. Всякие сноуфлейки, dbt, гринпламы...

@mass-any_key-lite 5 ай бұрын

"Почему в IT лучше входить" Так ведь блогеры, подобные тебе, любят всякую ... городить.

@digitalberd 5 ай бұрын

А по сути видоса есть предметная критика?) Про блогеров - согласен, но я старался всё честно говорить и душой не кривить...

@owio3190 7 ай бұрын

Всё! Бросаю 1С и в питон

@falantogan92 5 ай бұрын

Блин еще и sql теперь учить 🤪

@digitalberd 5 ай бұрын

🙂

@sjdjjsjsjs3991 3 ай бұрын

Мат. статистику, тервер, линейный анализ и ещё много интересных вещей

@MIKLFIRM 9 ай бұрын

😊

@viktormironov7110 7 ай бұрын

"Нужно знать только Python и SQL" - мммм, после вот таких балаболов прод и падает через раз... Чел иди ставки на спорт впаривать, не пытайся лезть в IT, оставь это людям, готовым тратить силы и время. А со своими за неделю вот готов иди в менеджеры...

@digitalberd 7 ай бұрын

Виктор, во-первых пошёл нахуй, быдло. А во вторых - можете как-то аргументировать ваши слова - что для инженерии данных на базовом уровне нужно ещё что-то помимо Python и SQL?

@viktormironov7110 7 ай бұрын

А ты как в своей прекрасной голове представлял наш последующий диалог после твоего "во-первых"?.. Мда, и я же ещё и быдло...

@SEOmaster_real 7 ай бұрын

Аргументы не подвезли парню

@kirill141 6 ай бұрын

@@digitalberd Я с питоном и дэйтой рядом не стоял, но на джаве с одним знанием джавы даже на интерна не возьмут, нужны хотя бы базовые знания фрэймворков (спринг и какой нить орм например хибернейт) и теории: ооп, паттерны, бд и т.д.. Думаю, что-то похожее и тут нужно уверенно знать: пандас, нимпи и т.д. что там у вас дата саентистов.

@АдилетСеитбеков-д7у 6 ай бұрын

@@kirill141джава уже переполнена, в 2021 году был последний поезд. Щас минимум желательно весь спринг знать, докер, брокер, скл, гит и даже так не устроишься, к сожалению джаву постигла та же участь что и в свое время Пайтон. Это если говорить про новичков вкатунов