AWS Data Engineering: Xây dựng và phối hợp các đường ống dữ liệu hiện đại

Trong thế giới ngày nay, các tổ chức dựa vào các đường ống dữ liệu mạnh mẽ để biến thông tin thô thành những hiểu biết có thể hành động. Chương trình này hướng dẫn bạn qua quá trình thiết kế và triển khai các nền tảng dữ liệu sẵn sàng sản xuất trên AWS. Bạn sẽ chuyển từ việc hiểu các mô hình cơ sở dữ kiện cốt lõi để xây dựng kiến trúc hồ hiện đại và tự động hóa các luồng công việc, giành được các kỹ năng thực tế cần thiết để làm việc như một kỹ sư dữ lượng đám mây. Bạn sẽ học được: - Mô hình dữ liệu hiệu quả trên cơ sở dữ kiện quan hệ, tài liệu và đồ thị bao gồm PostgreSQL, MongoDB và Neo4j - Xây dựng kho dữ liệu đám mây sử dụng Redshift, thiết kế các sơ đồ chiều tối ưu và các đường ống ETL mạnh mẽ - Thực hiện kiến trúc lakehouse hiện đại với S3, Glue, Iceberg và Athena sử dụng Apache Spark để xử lý các lớp dữ liệu - Đoàn kết và lên lịch các luồng dữ liệu phức tạp bằng Apache Airflow và MWAA - Ứng dụng các kỹ thuật xác minh chất lượng dữ liệu hiện đại và cơ sở hạ tầng cơ bản như các khái niệm mã để đảm bảo độ tin cậy của đường ống Chương trình bắt đầu với các khái niệm cơ sở dữ liệu cơ bản và các chiến lược mô phỏng dữ kiện trước khi tiến tới kho lưu trữ đám mây, kiến trúc hồ, và dàn nhạc tự động. Chương trình này được thiết kế cho các kỹ sư dữ liệu, nhà phát triển phần mềm và nhà phân tích dữ kiện tham vọng muốn chuyển sang kỹ thuật dữ lượng dựa trên đám mây. Không cần kinh nghiệm AWS hoặc kỹ năng dữ liêu trước đây, mặc dù hiểu biết cơ bản về SQL và Python sẽ giúp ích. Bắt đầu xây dựng nền tảng kỹ thuật dữ liệu đám mây của bạn ngay hôm nay.