Thử dùng Airflow để crawl dữ liệu, train model hoàn toàn tự động - Mì AI

[@Thuando]

Thuận Đỗ người bạn mới gởi đến bạn lời xin lỗi chân thành nhé ! Hổm giờ bận quá nay mới rảnh đến thăm kênh bạn . Bạn chia sẻ rất hữu ích , Thuận Đỗ đã nhấn vào nút trên cùng rồi nhé bạn ! Mình sẽ đón đợi những clip mới hay từ bạn nữa nè !

Thanks bạn!

[@MrSieuCo]

Thank you bạn chia sẻ đúng lúc mình đang học.

Yeah. Rất vui vì giúp được bạn. Cần thêm gì bạn post lên facebook.com/groups/miaigroup trao đổi cho vui nhé!

[@khamvuong92]

42:07 khắc phục mạng chờ bằng cách thêm độ dài sensor phải ko a?

Đoạn này a nghĩ nên thêm vào code đoạn handle lỗi mạng. Anh code sample nên ko có :D

[@cauutv8615]

anh ơi anh có thể so sánh Apache Airflow với Apache Zeppelin được không ạ. Em đang mắc ở chỗ này ạ

Anh lại chưa dùng con Zep. Em post lên Group trao đổi, chia sẻ: facebook.com/groups/miaigroup xem

[@ThanhTruong-sf3pc]

42:38 khúc này task crawl đang bị lỗi thì vì sao anh mark as succesful xong lại chạy được task train model ạ? Dữ liệu nó lấy từ đâu ạ?

Anh đã tải sẵn từ lần chạy trước rồi nên có thể mark tạm được.

[@BusinessCasualWomen]

Làm sao cài thêm các package tensorflow, pymysql, ... vào để chạy các PythonOperator trong airflow được vậy bạn?

Bạn cài vào môi trường python của server chạy Airflow trước sau đó khi execcute nó sẽ load các thư viện đó ra. Cảm ơn bạn ủng hộ nhé! Cần thêm gì bạn post lên facebook.com/groups/miaigroup nhé!

[@tienta8053]

anh ơi em không tìm được video train model bằng LSTM, anh cho em xin link với ạ

Bài toán cụ thể của em là gì?

[@huynhvanthuan1838]

cái airflow này có cài được trên window không anh hay linux với macbook mới cài được vậy

Cài được hết em nhé

[@nguyenvanhao5250]

A ơi a cài airflow trên window được chưa ạ. E cài dô anaconda lúc chạy cứ báo lỗi SQLite

[@GameProfessor]

Có thể thay đổi tham số model ngay trên giao diện airflow để chạy lại không?

Được luôn bạn. Bạn có thể switch giữa các tham số, đổi kiến trúc model hay làm gì tùy thích vì viêt code python mà. Cần thêm gì bạn post lên facebook.com/groups/miaigroup nhé!

[@longtruong9935]

Ngon quá

Thanks bạn ủng hộ nha!

[@amvancuong4900]

Anh Thắng cho em hỏi chút , phần cài đặt môi trường + airflow em chưa thấy trong bài. Phần này tự tìm hiểu hả anh

Uhm. Cũng khá đơn giản em. Em cài di vướng gì post lên facebook.com/groups/miaigroup nhé!

[@BuiQuangChinh-BDCVT]

Anh ơi cho e hỏi tý ạ. Em cũng mới tìm hiểu và dùng cơ bản về Airflow thì nay e muốn không dùng theo kiểu localhost nữa mà muốn public ra cho nhiều người có thể dùng chung và up file lên sử dụng chung thì phải làm sao ạ? Và khi public thế thì e có thể giới hạn quyền cho người nào đăng nhập tài khoản nào thì chỉ xem đc các DAGs của họ còn admin xem đc hết không ạ?

Em post lên facebook.com/groups/miaigroup trao đổi cho tiện nhé!

[@BuiQuangChinh-BDCVT]

@ e post mà chưa thấy đc ai xem 🥲🥲🥲

[@ThanhTruong-sf3pc]

Anh ơi sao em chạy xong cái dag simple mà ko thấy có file nào date.txt hiện ra ạ

Em post lên facebook.com/groups/miaigroup kèm các thông tin ảnh chụp màn hình xem nhé!

[@ThanhTruong-sf3pc]

@ em post rồi ko ai trả lời ạ :)))

@@ThanhTruong-sf3pc Tag anh vào nhé!

[@dungtrananh1522]

So sánh con Airflow này với Nifi thì a thấy như thế nào ạ?

Anh lại chưa dùng Nifi :D