Giới thiệu về Apache Kafka và Xử lý Luồng

Dữ liệu thời gian thực là xương sống của các ứng dụng hiện đại, nhưng việc quản lý luồng sự kiện thông lượng cao có thể cảm thấy quá sức. Apache Kafka cung cấp một giải pháp mạnh mẽ, có thể mở rộng để xử lý các luồng dữ liệu liên tục. Trong khóa học dựa trên văn bản này, bạn sẽ chuyển từ việc hiểu các khái niệm nhắn tin cơ bản đến thiết kế luồng sự kiện thời gian thực của riêng mình. Bạn sẽ khám phá kiến trúc nội bộ của Kafka, học cách định tuyến dữ liệu đáng tin cậy giữa các hệ thống và khám phá cách xử lý luồng hiện đại biến các sự kiện thô thành thông tin chi tiết có thể hành động. Bạn sẽ học được gì: • Hiểu thuật ngữ luồng cơ bản, chủ đề, phân vùng và offset • Cấu hình môi trường Kafka hiện đại bằng chế độ KRaft mà không cần các phụ thuộc ZooKeeper cũ • Xây dựng producer và consumer tin nhắn đáng tin cậy để xuất bản và đọc luồng dữ liệu • Thiết kế các đường ống dữ liệu có khả năng chịu lỗi bằng cách sử dụng nhóm người tiêu dùng và sao chép • Tích hợp Kafka với các hệ thống bên ngoài bằng Kafka Connect và các framework xử lý luồng cơ bản như Apache Spark • Áp dụng các phương pháp quản lý lược đồ hiện đại để duy trì chất lượng dữ liệu trên các luồng Khóa học bắt đầu bằng các định nghĩa rõ ràng về kiến trúc luồng sự kiện trước khi hướng dẫn bạn thông qua các tình huống thực tế, dựa trên văn bản. Bạn sẽ tiến triển một cách logic từ việc thiết lập một cụm cơ bản đến nghiên cứu các đoạn mã để định tuyến tin nhắn và cuối cùng là khám phá các mẫu tích hợp. Khóa học này được thiết kế hoàn toàn cho người mới bắt đầu. Không yêu cầu kinh nghiệm trước đó với các hệ thống phân tán hoặc kỹ thuật dữ liệu. Bắt đầu đọc ngay hôm nay để mở khóa sức mạnh của luồng dữ liệu thời gian thực và xây dựng đường ống đầu tiên của bạn được điều khiển bằng sự kiện.