Serverless Data Processing with Dataflow'un Temelleri

Modern işletmeler, karmaşık sunucu altyapısını yönetmenin üst üste binmesi olmadan hızlı ve güvenilir bir şekilde işlenmesi gereken muazzam miktarda veri üretir. Sunucusuz veri işleme, platform kaynak temini ve ölçeklendirmeyi otomatik olarak ele alırken, boru hattı mantığını yazmaya odaklanmanıza izin verir. Bu metin tabanlı kurs, Dataflow ve Apache Beam kullanarak sunucusuz veri işlemesinin temel kavramlarını size yönlendirir. Temel veri boru hatlarını anlamaktan, hem tarihi parti verilerini hem de gerçek zamanlı akış veri kaynaklarını yönetebilen kendi sunucusuz boru hatlarınızı dağıtmaya geçiş yapacaksınız. Ne öğreneceksiniz: - Çekirdek sunucusuz veri işleme kavramlarını, terminolojiyi ve mimariyi anlayın. - Apache Beam SDK'yı kullanarak veri boru hattı kodunu paket ve akış yükleri için yazın. - Fiziksel sunucuları yönetmeden Dataflow'da boru hatlarını dağıtın ve çalıştırın. - Boru hattı tasarım paternlerini dönüştürmek, filtrelemek ve veri kümelerini toplamak için uygulayın. - Boru hatlarını modern bulut depolama ve veri depolaması hedefleriyle birleştirin. - Güvenilirliği sağlamak için temel boru hattı test ve izleme stratejilerini uygulamak. Ana terminoloji, temel kavramlar ve parti ve akış işlemesinin temel tanımlarıyla başlayacaksınız, ardından pratik boru hattı inşasına geçeceksiniz. Detaylı yazılı açıklamalar ve yapısal kod yürüyüşleri yoluyla, boru hattı adımlarını yazmayı, yürütme ortamlarını yönetmeyi ve veri aktarım hızını iyileştirmeyi öğreneceksiniz. Bu ders, Apache Beam veya Dataflow ile önceden tecrübe gerektirmeyen yeni başlayanlar için tasarlanmıştır, ancak programlama kavramlarının temel anlayışı yararlıdır. Ölçeklenebilir, bakımsız veri boru hatları inşa etmek için bugün okumaya başlayın.