Xây dựng các đường ống dữ liệu hàng loạt với BigQuery và Dataproc

Các tổ chức hiện đại dựa vào các luồng dữ liệu ổn định và đáng tin cậy để đưa ra các quyết định kinh doanh quan trọng. Chương trình học dựa trên văn bản này hướng dẫn bạn qua các mô hình cốt lõi của xử lý dữ liệu, giúp bạn chọn và thực hiện kiến trúc đường ống đúng cho các dự án của bạn. Bạn sẽ chuyển từ việc hiểu các khái niệm dữ kiện cơ bản đến thiết kế các đường ống hàng loạt sẵn sàng sản xuất bằng cách sử dụng các công nghệ đám mây tiêu chuẩn của ngành. Bạn sẽ học được: * Hiểu được sự khác biệt cơ bản giữa các mô hình ETL, ELT và EL để chọn cách tiếp cận tốt nhất cho dữ liệu của bạn. * Tạo kho dữ liệu có thể mở rộng và chạy truy vấn phân tích bằng BigQuery. * Xử lý các tập dữ liệu quy mô lớn bằng cách chạy các công việc Spark trên các cụm Dataproc được quản lý và môi trường serverless. * Thiết kế các luồng công việc ống dẫn trực quan, không mã hóa bằng Cloud Data Fusion. * Apply hiện đại quản lý dữ liệu và quản lý quy hoạch thực hành để đảm bảo độ tin cậy đường ống. Bạn sẽ bắt đầu với các khái niệm và thuật ngữ cơ bản về kỹ thuật dữ liệu trước khi tiến tới thiết kế đường ống. Qua các giải thích có cấu trúc và các kịch bản mã SQL và Spark thực tế, bạn sẽ khám phá cách phối hợp các công cụ dữ kiện đa dạng để xây dựng các hệ thống xử lý hàng loạt liên kết. Chương trình này được thiết kế cho người mới bắt đầu, kỹ sư dữ liệu tham vọng, và quản trị viên cơ sở dữ kiện muốn chuyển sang các luồng dữ liêu dựa trên đám mây. Không cần kinh nghiệm kỹ thuật đám mờ trước đó. Bắt đầu xây dựng các đường ống dữ liệu tự động đáng tin cậy hôm nay.