Roadmap để trở thành data engineer thành công !!

Các bạn có bao giờ thắc mắc cần phải học những gì để trở thành một người Data Engieer thành công ? Hiện nay trên thị trường có vô vàn công cụ khác nhau, nếu như một người mới làm về dữ liệu, chắc chắn sẽ vô cùng hoang mang và không biết bắt đầu từ đâu, chính vì vậy mình làm video này để chia sẻ với các bạn về kinh nghiệm của mình, cũng như giới thiệu với các bạn những công cụ hiện đang được dùng nhiều nhất và phổ biết nhất tại nhiều công ty trên thế giới. Mình hy vọng những chia sẻ của mình sẽ giúp các bạn có một cái nhìn rõ ràng hơn về con đường trở thành data engineer này.
Chúc các bạn sớm thành công !!!
#dataengineer
#maide
#data
#bigdata

[@MinhNguyen-kc8fq]

bài giảng rẫt rõ ràng. Thankiu chị nhiều !!!

[@MaiDE-uq7ws]

cám ơn bạn đã thích video của mình, mong là video của mình có thể giúp được chút nào đó cho bạn :)

[@buison6454]

Giới thiệu rõ và chi tiết. Cảm ơn.

[@quannguyenvan3963]

Cảm ơn chị nhiều ạ. Mong chị ra nhiều video chia sẻ các kinh nghiệm hơn để các newbie như e có thể học hỏi ạ.

[@MaiDE-uq7ws]

cám ơn bạn đã để lại cmt, nếu thật sự những videos của mình có thể giúp được các bạn mới hay những bạn muốn tìm hiểu về DE thì mình sẽ tiếp tục dành thời gian để làm video ☺ Một lần nữa cám ơn bạn đã nói lên suy nghĩ và mong muốn của mình khi xem videos 🥰

[@HieuNguyen-wx9sb]

Cám ơn b đã chia sẻ. Kiến thức rất hữu ích. :)

[@MaiDE-uq7ws]

cám ơn bạn đã xem video và để lại cmt động viên mình :) Mong bạn sẽ luôn ủng hộ

[@quanvan684]

Video rất hữu ích ạ.

[@MaiDE-uq7ws]

cám ơn bạn nhiều 🥰

[@hunghai6378]

em cam on chi, video rat hay a

[@MaiDE-uq7ws]

cám ơn bạn đã thích và để lại cmt nhé 🥰

[@sonquachha8346]

Cảm ơn chị nhiều, mong chị tiếp tục ra video về Data Engineer ạ. Nếu có thể chị có thể cho em xin LinkedIn để e connect được không ạ? Em đang học DA tại Canada. Thanks c.

[@kaiidev99]

Video rất hữu ích ạ ❤

[@MaiDE-uq7ws]

cám ơn bạn nhiều 🥰

[@tuyetbang4810]

Cảm ơn bạn đã chia sẻ. Mình ở bộ phận thiết kế của công ty đồ gỗ. Hiện tại công ty mình đang lưu trữ dữ liệu dạng pdf email và các file office trên sever của công ty. Những lúc cần truy xuất thông tin rất mất thời gian. Mình rất muốn giải quyết vấn đề này cho công ty. Minh đang tự học lập trình python. Mong bạn chỉ cho mình cách thức hoặc các công cụ cần học để mình đạt mục tiêu nhanh hơn

[@thungachauthi1774]

Cảm ơn bạn❤

[@MaiDE-uq7ws]

Mình cũng cám ơn bạn nhiều

[@user-dv2zd2xz8c]

Em chào chị ạ, video rất hay và hữu ích với em. Em mong chị ra video về kiến thức Distributed system nhé ạ. Em cảm ơn ạ!!

[@MaiDE-uq7ws]

Chào bạn, cám ơn bạn đã thích video của mình. Video về hệ thống phân tán, mình đã ra rồi, bạn tìm lại trên kênh của mình để xem nhé !

[@user-dv2zd2xz8c]

@@MaiDE-uq7ws Chị ơi, em là newbie nên cần học những kiến thức nào thì có đủ điều kiện đi thực tập thực tế ở doanh nghiệp vậy ạ?

[@user-dv2zd2xz8c]

@@MaiDE-uq7ws Chị ơi, tên title của video là gì vậy ạ, em tìm theo từ khóa hệ thống phân tán trên kênh mà không thấy ạ.

[@MaiDE-uq7ws]

@@user-dv2zd2xz8c kzbin.info/www/bejne/mneml6OoqrCsqbM đây nhé, mình để chung với video về Hadoop nên bạn không tìm thấy là phải, sr bạn :)

[@QuangHuy-is7jo]

lần sau chị có thể làm video về các câu hỏi khi phỏng vấn intern và fresher vị trí DE được không ạ ?

[@MaiDE-uq7ws]

để mình tổng hợp rồi làm 1 video về chủ đề này nhé, cũng có nhiều bạn hỏi mình :)

[@thenguyen5887]

em muốn hỏi ở chỗ serving, tức là tuỳ vào nhu cầu phân tích thì dữ liệu tại đó lại được tổ chức theo những cách khác nhau đúng không ạ, tức là từ 1 cái storage ban đầu thì mình có thể tạo ra nhiều cái serving ở những chỗ khác nhau đúng k

[@MaiDE-uq7ws]

đúng rồi bạn nhé, có thể tạo nhiều serving khác nhau tùy vào bài toán và yêu cầu của từng dự án, hoặc có thể phân chia theo team, theo khối, mảng ...

[@vannguyenanh9180]

chị ơi, em thấy nhiều người khác nói rằng DE cần biết kiến thức của Software engineer và khuyên nên chuyển từ SWE sang DE thì e ko biết nên theo DE luôn hay học SWE chuyển sang DE ạ

[@MaiDE-uq7ws]

chào bạn, theo DE luôn bạn nhé, mình không phải là một SWE trước khi làm DE mà mình vẫn theo DE không vấn đề gì :)

[@hungdung5419]

Chị ơi, em có thể xin email chị để hỏi một số kiến thức về DE được k ạ? Em cảm ơn chị đã chia sẻ!

[@MaiDE-uq7ws]

bạn có thể gửi mail về địa chỉ [e-mail] nhé ;)

[@toancdu]

Cảm ơn bạn nhiều, cho mình hỏi 40 tuổi có nên theo học DE không bạn, mình cảm ơn.

[@MaiDE-uq7ws]

với quan điểm cá nhân của mình thì không vấn đề gì nhé, quan trọng là động lực và lý do của bạn thôi !!!

[@r0cketRacoon]

video giải thích rất hay ạ cho e hỏi là mình chỉ học 1 trong 3 ngôn ngữ (python,java,scala) hay cần học tất ạ? và có cần học noSQL k chị

[@MaiDE-uq7ws]

Chào bạn, nếu bạn muốn theo DE thì chỉ cần học 1 trong 3 nhé, và mình thấy python là thông dụng và dễ học nhất, bạn tham khảo nhé. NoSQL thì cũng không cần với những vị trí fresher hay junior, cái đó bạn học sau cũng được

[@r0cketRacoon]

@@MaiDE-uq7ws dạ e cảm ơn, thế thì tiện quá, e cx đã học python cho ML,DL, dạo này tự dưng hứng thú qua mảng DE

[@MaiDE-uq7ws]

@@r0cketRacoon yes, vậy bạn thử xem có hợp DE không nhé, mình sẽ rất vui nếu những video của mình có thể đồng hành một phần nào đó trên con đường DE của bạn, chúc bạn thành công :)

[@r0cketRacoon]

@@MaiDE-uq7ws à, c có thể ra 1 video nói cụ thể DE sẽ làm j vs python đc k ạ? Những thư viện nào sẽ đc sử dụng? Có khác nhiều với dân DA/DS k ? Dạng dạng vậy ạ

[@MaiDE-uq7ws]

@@r0cketRacoon cám ơn gợi ý của bạn, mình note rồi nhé, thời gian sắp tới mình sẽ ra 1 video về chủ đề này :)

[@thang4280]

Chị ơi, em hiện tại đang tự học để theo con đường DE, chị cho em hỏi là mình cần trang bị những kiến thức nào để có thể xin đi thực tập được ạ ? (em đã học về python, sql rồi ạ)

[@MaiDE-uq7ws]

Chào em, để đi thực tập thì cũng tùy công ty họ sẽ yêu cầu khác nhau, cơ bản thì vẫn là python và sql, sau đấy thì em học thêm về hệ thống phân tán nếu em muốn làm về DE cho bigdata, hoặc các tool ETL như là SSIS. Sau đó là pyspark. Ngoài ra thì em tìm hiểu thêm chút kiến thứ về cloud nữa là ok.

[@thang4280]

@@MaiDE-uq7wsdạ vâng chị, vậy giờ em bắt đầu với hadoop thì có ổn không hả chị ?

[@user-nt9vo4um7c]

Chị cho em hỏi việc dựng data model có nằm trong phạm vi công việc của 1 DE không ạ?

[@MaiDE-uq7ws]

việc xây dựng mô hình dữ liệu giúp quyết định cách dữ liệu sẽ được tổ chức và lưu trữ - điều này rất quan trọng khi làm việc với data. Tuy nhiên mức độ tham gia vào việc xây dựng mô hình dữ liệu thì tùy vào quy mô của tổ chức và vị trí bạn đảm nhiệm. Thường thì nếu ở vị trí fresher hay junior thì chưa cần. Ngoài ra, một số công ty lớn, việc này sẽ thuộc về Data Architect, hoặc là sự bàn bạc kết hợp của DE, BA và Data Architect. Nhưng chủ yếu, công việc của DE chính vẫn là tâp trung vào việc xây dựng hệ thống để hỗ trợ và hiện thực hóa mô hình dữ liệu đã được xác định. Tóm lại thì việc hiểu và biết cách xây dựng data model là một kỹ năng cần thiết cho một DE, nhưng không nhất thiết phải học nó khi bạn mới bắt đầu.

[@nguyeninhan8542]

Chị cho em hỏi ạ, hiện em đang là sinh viên năm 2 muốn tự học để trở thành DE. Chị có thể cho em một vài nguồn để học được ko ạ. Em cảm ơn ạ!

[@MaiDE-uq7ws]

chào bạn, tất cả nguồn mình học đều thông qua website chính thức của python, spark và databricks, giờ thì có cả chat gpt nữa :). Mình nghĩ nguồn học bây giờ rất nhiều, quan trọng là cách học. Mình thì hay học chậm, hiểu sâu và cố gắng áp dụng những gì mình học được vào dự án thực tế. Mình không học nhanh, học vội và học qua loa. Hy vọng câu trả lời của mình giúp được chút gì đó cho bạn :)

[@user-jk7gh7ch6h]

Chào c. Em đang làm trong ngành logistics. Bây giờ e muốn chuyển sang làm ngành DE. Em chưa hề học IT và tất cả kiến thức đều từ con số 0. C cho em xin lộ trình để bắt đầu ạ. Em cảm ơn

[@hunghai6378]

len gg tim nhieu lam ban

[@MaiDE-uq7ws]

đúng là như bạn @hunghai6378 đã cmt, bạn lên mạng tìm thì sẽ thấy nhiều khóa học về DE cho người mới bắt đầu. Tuy nhiên mình cũng sắp ra 1 video về chủ đề này vì cũng nhiều bạn nhắn tin hỏi mình quá, bạn chờ thêm 1-2 tuần nữa nhé!

[@hunghai6378]

@@MaiDE-uq7ws chi oi cho em hoi hoc phi tam bao nhieu vay a

[@user-jk7gh7ch6h]

@@MaiDE-uq7ws ok Mai xinh gái. Mình chờ video của bạn đấy nha

[@MaiDE-uq7ws]

@@user-jk7gh7ch6h hôm nay video sẽ được up nhé ;)

[@hungbuiuc3357]

Chào chị, chị cho e hỏi là DE thì có cần nhiều toán kiểu như giải tích đại số không ạ

[@MaiDE-uq7ws]

Chào bạn, với kn của mình thì không nhé 😆

[@Tientqt123]

​@@MaiDE-uq7ws Sao em nghe noi la phai gioi toan du lam moi lam dc ma chi nhi😅😅?

[@MaiDE-uq7ws]

@@Tientqt123 Em nghe ai nói thế ? 😅

[@kai-pkdshowhand2413]

Chào Chị, em hiện tại là đang làm về mảng IT triển khai phần mềm. Em đang muốn chuyển ngành về Data. Mình cho em hỏi cần chuẩn bị gì về kiến thức và tính cách khi bắt đầu. Em cảm ơn Chị

[@MaiDE-uq7ws]

Kiến thức thì mình đã liệt kê hết trong video về roadmap rồi, nhưng cơ bản nhất thì bạn nên bắt đầu từ python và SQL, sau đó là hệ thống phân tán, rồi spark. Còn về tính cách thì cần sự logic, cẩn thận, tỷ mỷ và chăm chỉ :)

[@minhthai8840]

Bạn có khóa học online dạy về DE ko

[@MaiDE-uq7ws]

kênh của mình chính là một khóa học online về DE đó bạn, bạn cứ xem theo thứ tự up video là được nhé. Nếu bạn đã biết về python + SQL và hiểu được tất cả những gì mình chia sẻ trong kênh của mình thì bạn có thể đi xin việc về DE được rồi, ít nhất là vị trí fresher, không thì cũng junior nhé 😜

[@minhthai8840]

Cám ơn bạn rất nhiều. Kênh của bạn rất có giá trị, hy vọng Bạn sẽ tiếp tục cho đi.

[@MaiDE-uq7ws]

@@minhthai8840 nếu như tiếp tục có người thấy những chia sẻ của mình có giá trị, thì chắc chắn mình sẽ tiếp tục dành thời gian để chia sẻ, cám ơn bạn đã nói lên suy nghĩ của mình để mình biết được rằng những gì mình đang làm thật sự đem lại một giá trị nào đó cho người xem, cám ơn bạn rất nhiều 🥰

[@aiviet5497]

Chị cần tuyển phi công không ạ :)))

[@MaiDE-uq7ws]

😸😹🙀