Fabric ile veri mühendisliği çözümleri kurun
OneLake, Lakehouse ve Delta, Spark medallion dönüşüm, Dataflow Gen2/pipeline orkestrasyon, Warehouse sunum ve güvenlikle Fabric'te veri mühendisliği çözümleri kurmayı öğreten eğitim.
Microsoft Fabric ile veri mühendisliği çözümleri
Bu eğitim, Microsoft Fabric platformunda veri mühendisliği çözümleri kurmayı uygulamalı öğretir. OneLake ve workspace, Lakehouse ile Delta tabloları, Spark notebook üzerinde PySpark ve Spark SQL ile dönüşüm işlenir. Medallion (bronze/silver/gold) mimarisi, Dataflow Gen2 ile Power Query dönüşümü, data pipeline ile copy activity ve orkestrasyon, shortcut ile dış veri entegrasyonu ele alınır. Artımlı yük, MERGE ile upsert, veri kalitesi, Warehouse ile sunum, temel Eventstream akışı, izleme ve güvenlik (roller, RLS) uygulamalı gösterilir.
3 Gün. Her gün dört modül; Lakehouse, Spark ve pipeline ile hat kurma lableri.
Orta Seviye — Fabric'te veri mühendisliği çözümleri kurmayı; Lakehouse, Spark notebook, pipeline ve temel gerçek zamanlı akışla kapsar.
Bir workspace'te ham veriyi Lakehouse'a alıp Spark ve pipeline ile dönüştürerek uçtan uca çözüm kurarak uygulanır.
Lakehouse, Spark, pipeline ve ambarı tek platformda birlikte kullanırsınız.
PySpark ile büyük veriyi ölçekli dönüştürürsünüz.
Pipeline ile hatları zamanlar ve güvenilir hale getirirsiniz.
Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri
PySpark ve SQL temeline aşinalık gerekir.
Veri alma/dönüştürme akışına aşinalık beklenir.
Bir Fabric capacity/trial erişimi gerekir.
DataFrame kavramına temel aşinalık faydalıdır.
Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.
Program sonunda katılımcılar:
Delta Lakehouse kurup Spark ile dönüşüm yaparsınız.
PySpark ve Spark SQL ile medallion dönüşüm uygularsınız.
Pipeline ve Dataflow Gen2 ile hatları orkestre edersiniz.
Shortcut ile çoklu kaynağı birleştirirsiniz.
Veriyi Warehouse'a sunar ve DirectLake ile raporlarsınız.
Eventstream ile temel akış alımı kurarsınız.
Roller ve RLS ile erişimi yönetirsiniz.
Monitoring hub ile hat ve kullanımını izlersiniz.
Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.
Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.
Apache Airflow temelleri: mimari, scheduler/executor, DAG, operatörler, schedule_interval, catchup, Jinja şablon ve XCom'u uygulamalı öğrenin.
Detayları Gör →Veri mühendisliği yaşam döngüsü: ingest (batch/stream/CDC), depolama, Parquet/Avro, boyutsal modelleme, ETL/ELT, orkestrasyon ve veri kalitesini öğrenin.
Detayları Gör →ETL testi temelleri: test türleri, STTM okuma, count reconciliation, dönüşüm doğrulama ve veri kalitesi kontrollerini SQL ile uygulamalı öğrenin.
Detayları Gör →Airflow'da özel operatör, hook, sensor, deferrable trigger ve plugin geliştirme; provider paketleme ve pytest/CI entegrasyonunu uygulamalı öğrenin.
Detayları Gör →Snowflake'e giriş: tablo oluşturma, COPY INTO ile veri yükleme, SQL sorgulama, virtual warehouse ve Snowsight dashboard'u uygulamalı öğrenin.
Detayları Gör →