Data Engineering Fundamentals: Pipelines, SQL, and Orchestration (bằng tiếng Anh).

Kỹ thuật dữ liệu là trụ cột của khoa học dữ kiện và phân tích hiện đại, tuy nhiên, làm chủ các nền tảng của lưu lượng dữ lượng và cơ sở hạ tầng có thể phức tạp. Chương trình này cung cấp một nền tảng có cấu trúc trong các công cụ thiết yếu và các mô hình kiến trúc cần thiết để thiết kế, xây dựng và duy trì các đường ống hấp thụ và chuyển đổi dữ liệu đáng tin cậy. Chương trình này tập trung vào kiến thức cơ bản, thực tiễn, chuẩn bị cho bạn đối phó với các thách thức và đánh giá kỹ thuật của Kỹ sư dữ liệu cấp độ nhập. Bạn sẽ học được: * Hiểu các nguyên tắc mô hình dữ liệu, bao gồm mô hình chiều, và quản lý dữ kiện quan hệ bằng PostgreSQL. * Luyện tập viết truy vấn SQL hiệu quả và áp dụng Python cho xử lý dữ liệu phức tạp và logic chuyển đổi. * Thiết kế các kiến trúc dữ liệu hàng loạt và truyền trực tuyến đáng tin cậy sử dụng các khái niệm từ Apache Kafka và hệ thống lưu trữ phân tán. * Cấu hình và giám sát các luồng dữ liệu có thể tái tạo bằng cách sử dụng các tính năng cơ bản của Apache Airflow. * Apply cơ bản dữ liệu kho hàng mẫu, bao gồm các khái niệm liên quan đến cửa hàng cột như ClickHouse và tối ưu hóa truy vấn phân tích. * Học các thực tiễn tốt nhất cần thiết cho cấu trúc, kiểm tra và triển khai công việc kỹ thuật dữ liệu hiệu quả. Chương trình bắt đầu với thuật ngữ cốt lõi và lý thuyết mô hình dữ liệu, tiến triển thông qua ứng dụng thực tế sử dụng Python và SQL để thao tác dữ kiện, và kết thúc với các bài học về cấu trúc các luồng công việc phức tạp và tích hợp các công nghệ lưu trữ và truyền phát khác nhau. Lớp học này được thiết kế đặc biệt cho người mới bắt đầu quan tâm đến việc trở thành kỹ sư dữ liệu. Không cần kinh nghiệm trước với cơ sở dữ liệu hoặc mã hóa phức tạp, chỉ cần kiến thức lập trình cơ bản. Bắt đầu xây dựng kiến thức kỹ thuật dữ liệu cơ bản của bạn hôm nay.