DevOps và chu kỳ phát triển trong Azure Databricks

Scaling data workloads yêu cầu nhiều hơn chỉ viết mã; nó đòi hỏi các quy trình phát triển mạnh mẽ, sản xuất. Lớp học dựa trên văn bản này hướng dẫn bạn thiết lập chu kỳ phát triển phần mềm chuyên nghiệp trực tiếp trong Azure Databricks. Bạn sẽ chuyển từ viết mã ghi chép thủ công đến triển khai hoàn toàn tự động, kiểm soát phiên bản và thử nghiệm các đường ống dữ liệu. Bạn sẽ học được: - Hiểu các khái niệm DevOps cơ bản và cách họ áp dụng cho các nền tảng dữ liệu đám mây - Cấu hình tích hợp Git và chiến lược phân nhánh trong Azure Databricks Repos - Thực hiện các mẫu thử nghiệm cho các tập tin và thư viện bằng các khung thử dụng Python - Quản lý cấu hình môi trường và bí mật an toàn - Thiết lập cơ sở hạ tầng và các luồng công việc bằng lập trình bằng cách sử dụng Databricks Asset Bundles và Databrick CLI - Thiết kế các luồng công việc CI / CD cơ bản cho tích hợp và giao tiếp liên tục Chương trình bắt đầu với các khái niệm chu kỳ sống cốt lõi và các nguyên tắc tích hợp Git trước khi chuyển sang các chiến lược kiểm thử, cấu hình môi trường và triển khai tự động. Bạn sẽ học qua các giải thích rõ ràng, viết, ví dụ cấu hình, và các kịch bản triển khai từng bước. Lớp học này được thiết kế cho kỹ sư dữ liệu, nhà phân tích và người thực hành đám mây mới bắt đầu tìm kiếm các thực hành kỹ thuật phần mềm chuyên nghiệp trong Databricks. Không cần kinh nghiệm DevOps cao cấp. Bắt đầu xây dựng các đường ống dữ liệu tự động đáng tin cậy trong Azure Databricks ngay hôm nay.