Airflow cơ bản - Tìm hiểu về Data Ingestion Orchestration

Xin chào tất cả mọi người, Week 2, Video của tuần này với chủ đề Data Camping sẽ cùng nhau cài đặt và thực hành về các task liên quan tới source integration và data ingestion. Bằng cách tiếp cận từ dễ tới khó, chúng mình sẽ cùng tìm hiểu được các một pipeline sẽ connect và ingest data từ nguồn để đưa vào hệ thống của chúng ta. Trong tuần này sẽ khá nặng để tìm hiểu về hệ thống data. Key message: Cùng xem qua và review lại tuần trước Source System là gì và vì sao lại cần data lake trong việc ingest data Tìm hiểu về Airflow, các cài đặt nhanh gọn Airflow trên Local Các vấn đề liên quan và các bài toán liên quan tới Data Ingestiion Subscribe to get new videos:    / @longdatadevlog   Connect here: https://www.fb.com/datafoundations   / long-bui-van     / discord   For more resources, check out: 📚 Free Data Engineering Handbook https://de-book.longdatadevlog.com/ 💻 My dotfiles - Data Dev Setup https://github.com/longbuivan/dotfile 🌐 Tech Blogs https://blogs.longdatadevlog.com/ #Dataengineering #SoftwareEngineering #airflow #dataingestion