Mô hình hóa dữ liệu hàng loạt với Cloud Dataflow và Apache Beam

Kỹ thuật dữ liệu hiện đại đòi hỏi khả năng xử lý các tập dữ liệu khổng lồ một cách hiệu quả mà không cần quản lý cơ sở hạ tầng phức tạp. Khóa học dựa trên văn bản này hướng dẫn bạn qua các khái niệm nền tảng về việc xây dựng các đường ống dữ liệu hàng loạt mạnh mẽ bằng cách sử dụng Cloud Dataflow và Apache Beam. Bạn sẽ bắt đầu bằng việc hiểu cách thiết kế các quy trình làm việc có thể mở rộng, di động để xử lý các chuyển đổi dữ liệu và dự đoán mô hình một cách dễ dàng. Những gì bạn sẽ học: Hiểu kiến trúc cốt lõi của Cloud Dataflow và xử lý dữ liệu không máy chủ; Viết các đường ống hàng loạt di động bằng cách sử dụng Apache Beam SDK; Triển khai các kỹ thuật chuyển đổi, nhóm và tổng hợp dữ liệu; Tích hợp các dự đoán mô hình học máy vào các đường ống hàng loạt của bạn; Giám sát, gỡ lỗi và tối ưu hóa hiệu suất đường ống; Áp dụng các phương pháp kỹ thuật dữ liệu hiện đại tốt nhất bao gồm kiểm thử đường ống cơ bản. Khóa học bắt đầu với các thuật ngữ thiết yếu và nguyên tắc thiết kế đường ống, di chuyển một cách có hệ thống từ việc nhập dữ liệu cơ bản đến các chuyển đổi đa bước phức tạp và thực thi mô hình hàng loạt. Được thiết kế đặc biệt cho người mới bắt đầu, khóa học này không yêu cầu kinh nghiệm trước đó về đường ống dữ liệu hoặc cơ sở hạ tầng đám mây. Hãy bắt đầu đọc ngay hôm nay để xây dựng các đường ống xử lý dữ liệu có thể mở rộng.