Task DAG'larıyla dayanıklı pipeline mimarisi kurun
Snowflake Task graph (DAG), koşullu tetikleme, finalizer, hata/retry yönetimi, gözlemlenebilirlik ve Stream/Dynamic Table ile ölçeklenebilir pipeline mimarisi tasarlamayı öğreten ileri eğitim.
Task tabanlı pipeline mimarisi ve orkestrasyon
Bu eğitim, Snowflake Task'lar üzerine kurulu pipeline mimarisine ve orkestrasyona odaklanır. Task graph (DAG) tasarımı, root/child task ve AFTER bağımlılıkları, WHEN koşulu ve SYSTEM$STREAM_HAS_DATA ile tetikleme, finalizer task, serverless vs warehouse task, retry/hata yönetimi ve gözlemlenebilirlik işlenir. Stream+Task+Dynamic Table bütünleşik mimari, idempotentlik, geri dolum (backfill) ve ölçeklenebilir tasarım uygulamalı ele alınır.
3 Gün. Her gün dört modül; çok adımlı task DAG'ı kurup hata ve geri dolum senaryolarını işleyen labler.
İleri Seviye — Snowflake Task DAG mimarisi, görev zinciri orkestrasyonu, hata yönetimi ve ölçeklenebilir pipeline tasarımını kapsar.
Katılımcılar çok adımlı bir task DAG'ı tasarlayıp hata, retry ve geri dolum senaryolarını uygulamalı yönetir.
Root/child task ile dayanıklı görev grafiği tasarlarsınız.
Retry, finalizer ve alert ile hataları kontrol altına alırsınız.
Ölçeklenebilir, idempotent pipeline mimarisi kurarsınız.
Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri
Task, Stream ve yükleme kavramlarına hakimiyet gerekir.
MERGE ve stored procedure yazabilmek faydalıdır.
ELT pipeline ve orkestrasyon kavramına aşinalık beklenir.
Task ve ambar yönetimi için uygun yetki önerilir.
Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.
Program sonunda katılımcılar:
Root/child task ile dayanıklı görev grafiği kurarsınız.
WHEN ve stream kontrolüyle gereksiz çalıştırmayı önlersiniz.
Finalizer task ile DAG kapanışını yönetirsiniz.
Retry, timeout ve alert ile hataları kontrol edersiniz.
TASK_HISTORY ve event table ile pipeline'ı izlersiniz.
Tekrar güvenli, tutarlı adımlar tasarlarsınız.
Snowpipe/Stream/Task/Dynamic Table'ı bir arada kurarsınız.
Parametrik backfill ile tarihsel yeniden işleme yaparsınız.
Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.
Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.
Microsoft Fabric ile veri ambarı: Warehouse, OneLake, T-SQL yükleme, boyutsal modelleme, RLS/maskeleme ve Direct Lake Power BI entegrasyonunu öğrenin.
Detayları Gör →
Microsoft Fabric ile veri mühendisliği: Lakehouse, Spark, pipeline/Dataflow, medallion, Eventstream, KQL ve DevOps'u DP-700 kapsamında öğrenin.
Detayları Gör →
Veri ambarı ETL testi: boyut/olgu doğrulama, grain, SCD1/2/3, late arriving, agregat tutarlılığı, reconciliation ve BI semantik katman testini öğrenin.
Detayları Gör →
ETL testine giriş: test stratejisi, STTM, source-to-target reconciliation, MINUS/EXCEPT karşılaştırma, veri kalitesi ve defect yönetimini öğrenin.
Detayları Gör →
ETL testini yalnızca SQL ile: reconciliation, MINUS/EXCEPT fark tespiti, checksum, dönüşüm doğrulama, veri kalitesi ve SCD Tip 2 testini uygulamalı öğrenin.
Detayları Gör →