MICROSOFT FABRIC: WORKING WITH COMPLEX DATA PIPELINES EĞİTİMİ

Fabric'te karmaşık hatları ustaca yönetin

Metadata-driven ingest, dinamik ifadeler, iç içe pipeline, hata dayanıklılığı ve CI/CD ile ölçekli Fabric hatları kurun.

Dinamik ifade, metadata-driven toplu ingest, ForEach ve If/Switch/Until kontrol akışı, retry/idempotency, high-watermark ve CI/CD ile Fabric'te karmaşık data pipeline tasarımı eğitimi.

3 gün İleri Seviye Online / Yüz Yüze / Hibrit Sertifikalı

Eğitim Hakkında

Fabric'te gelişmiş ve karmaşık veri hatları

Bu eğitim, Microsoft Fabric Data Factory'de karmaşık data pipeline'lar tasarlamayı öğretir. Dinamik içerik ve ifadeler (@pipeline, @activity), parametre/değişken ileri kullanımı, Lookup ile metadata-driven ingest ve ForEach ile toplu kopyalama işlenir. İç içe (invoke) pipeline, If/Switch ile dallanma, Until döngüsü, hata yolu ve retry stratejileri, idempotent yük ve kısmi başarısızlık yönetimi ele alınır. Notebook ve Dataflow etkinliği orkestrasyonu, parametreli çalıştırma, izleme/uyarı, performans (paralel ForEach) ve git/deployment pipeline ile CI/CD uygulamalı gösterilir.

Süre ve Format

3 Gün. Her gün dört modül; metadata-driven ve hata dayanıklı pipeline lableri.

Seviye

İleri Seviye — Fabric'te karmaşık data pipeline'lar; dinamik parametre, metadata-driven ingest, kontrol akışı ve hata dayanıklılığını kapsar.

Öğrenme Metodu

Bir workspace'te metadata tablosundan sürülen, hata dayanıklı ve parametrik pipeline'lar kurarak uygulanır.

Neden Bu Eğitim?

🧠Metadata-Driven

Tek bir parametrik hatla onlarca tabloyu metadata'dan sürerek yönetirsiniz.

🛡️Dayanıklılık

Retry, hata yolu ve idempotency ile üretimde güvenilir hatlar kurarsınız.

🔄CI/CD

Git ve deployment pipeline ile hatları ortamlar arası taşırsınız.

Anahtar Konular

fabric karmaşık pipelinemetadata-driven ingestdinamik içerikforeach pipelinehigh-watermarkidempotent yükfabric ci/cddata factory ileri
“Karmaşıklığı yöneten, onu metadata ve desenlerle ehlileştirendir.”

Ön Koşullar

Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri

1
Pipeline Temeli

Copy activity ve basit pipeline deneyimi gerekir.

2
İfade Bilgisi

Dinamik içerik/ifade kullanımına aşinalık faydalıdır.

3
Fabric Erişimi

Bir Fabric capacity/trial erişimi gerekir.

4
Veri Mühendisliği

ETL/ELT kavramlarına aşinalık beklenir.

Eğitim İçeriği

Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.

Günün hedefiKatılımcı dinamik ifadeler ve metadata ile sürülen toplu ingest kurabilir.
Modül 1
Dinamik İçerik
  • @pipeline ve sistem değişkenleri
  • @activity çıktısı kullanma
  • İfade fonksiyonları
  • Parametre türleri
  • Değişken (Set/Append)
  • Dinamik bağlantı
Modül 2
Lookup ve Metadata
  • Lookup etkinliği
  • Kontrol tablosu (metadata) tasarımı
  • Tablo listesini çekme
  • Get Metadata etkinliği
  • Dinamik source/sink
  • Yapılandırma yönetimi
Modül 3
ForEach ile Toplu
  • ForEach ile iterasyon
  • Metadata'dan toplu kopyalama
  • Paralel/sıralı mod
  • Batch count ayarı
  • İç içe ForEach kaçınma
  • Çıktı toplama
Modül 4
Dinamik Copy
  • Parametrik source/sink
  • Dinamik mapping
  • Şema sürüklenmesi
  • Tablo adı/filtre ifadesi
  • Artımlı (high-watermark)
  • Doğrulama
Günün hedefiKatılımcı dallanma/döngü ve hata dayanıklılığı desenlerini uygular.
Modül 1
Dallanma
  • If Condition
  • Switch ile çoklu dal
  • Koşul ifadeleri
  • Varsayılan dal
  • İç içe koşul
  • Senaryo seçimi
Modül 2
Döngü ve İç İçe
  • Until döngüsü
  • Invoke Pipeline (iç içe)
  • Modüler hat tasarımı
  • Parametre devri
  • Yeniden kullanılabilirlik
  • Bağımlılık yönetimi
Modül 3
Hata Dayanıklılığı
  • Başarı/başarısızlık/completion yolu
  • Retry ve retry interval
  • Timeout ayarı
  • Kısmi başarısızlık yönetimi
  • Idempotent yük
  • Dead-letter deseni
Modül 4
Watermark & Durum
  • High-watermark saklama
  • Son yük zamanı tablosu
  • Yeniden işleme
  • Durum güncelleme
  • Tekrar çalıştırma güvenliği
  • Tutarlılık
Günün hedefiKatılımcı notebook/Dataflow orkestrasyonu, izleme ve CI/CD'yi kurar.
Modül 1
Orkestrasyon
  • Notebook etkinliği parametreli
  • Dataflow Gen2 etkinliği
  • Bağımlılık zinciri
  • Olay/zamanlama tetikleyici
  • Modül kompozisyonu
  • Performans paralel
Modül 2
İzleme & Uyarı
  • Monitoring hub
  • Çalışma geçmişi analizi
  • Hata teşhisi
  • Uyarı/bildirim
  • Çalışma süresi SLA
  • Loglama deseni
Modül 3
Performans
  • Paralel ForEach ayarı
  • Copy throughput (DIU)
  • Darboğaz tespiti
  • Capacity etkisi
  • Maliyet dengesi
  • Ölçeklendirme
Modül 4
CI/CD
  • Git entegrasyonu
  • Deployment pipeline
  • Ortam parametreleştirme
  • Değişken kütüphanesi
  • Geri alma
  • Sürüm yönetimi

Eğitim Kazanımları

Program sonunda katılımcılar:

✅
Dinamik İçerik

@pipeline/@activity ifadeleriyle dinamik hatlar kurarsınız.

✅
Metadata-Driven

Kontrol tablosundan sürülen toplu ingest tasarlarsınız.

✅
ForEach

Paralel/sıralı ForEach ile toplu kopyalama yaparsınız.

✅
Dallanma

If/Switch ve Until ile karmaşık kontrol akışı kurarsınız.

✅
Dayanıklılık

Retry, hata yolu ve idempotency ile güvenilir hatlar yaparsınız.

✅
Watermark

High-watermark ile güvenli artımlı yük uygularsınız.

✅
Orkestrasyon

Notebook/Dataflow'u modüler biçimde orkestre edersiniz.

✅
CI/CD

Git ve deployment pipeline ile hatları taşır ve sürümlersiniz.

Kimler İçin Uygundur?

  • Fabric'te üretim seviyesi hat kuran veri mühendisleri
  • karmaşık orkestrasyon ihtiyacı olan ekipler

Sıkça Sorulan Sorular

Bu eğitim kimler için uygundur?
Fabric'te üretim seviyesi hat kuran veri mühendisleri ve karmaşık orkestrasyon ihtiyacı olan ekipler için uygundur.
Metadata-driven ingest nedir?
Tablo listesi ve ayarları bir kontrol tablosunda tutup tek parametrik hatla tüm kaynakları sürme desenidir.
Hata dayanıklılığı nasıl sağlanır?
Retry, hata yolu, timeout, idempotent yük ve high-watermark ile kısmi başarısızlıklar güvenle yönetilir.
Ön koşul var mı?
Basit pipeline ve copy activity deneyimi ile dinamik ifadelere aşinalık beklenir.
Sertifika veriliyor mu?
Eğitim sonunda Digital Vizyon Akademi Katılım ve Başarı Sertifikası verilir.

Sertifikalandırma

Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.

Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.

Örnek Sertifika d Digital Vizyon AKADEMİ KATILIM SERTİFİKASI Bu sertifika [Katılımcı Adı Soyadı] adlı katılımcının aşağıdaki eğitim programını başarıyla tamamladığını belgeler. Microsoft Fabric: Working with Complex Data Pipelines Eğitim Sertifika Kodu DV-2026XX00 Tarih 26.10.2026 Yetkili İmza DV AKADEMİ

Eğitim Bilgileri

Süre3 gün
Seviyeİleri Seviye
FormatOnline / Yüz Yüze / Hibrit
Sertifika✓ Var
Hemen Bilgi Al
İlgili Eğitimler

Bu Eğitimle Birlikte Tercih Edilenler

Veri Mühendisliği ve AmbarıSemi-structured Data: Loading and Querying JSON & XML Data in Snowflake Eğitimi
Veri ve Analitik Eğitimleri

Semi-structured Data: Loading and Querying JSON & XML Data in Snowflake Eğitimi

2 günOrtaOnline / Yüz Yüze / Hibrit

Snowflake'te yarı yapılandırılmış veri: VARIANT ile JSON/XML yükleme, path notasyonu, cast, LATERAL FLATTEN ve XMLGET ile sorgulamayı öğrenin.

Detayları Gör →
Veri Mühendisliği ve AmbarıSetting Up Apache Airflow in Fully Browser-Based Environments Eğitimi
Veri ve Analitik Eğitimleri

Setting Up Apache Airflow in Fully Browser-Based Environments Eğitimi

2 günTemelOnline / Yüz Yüze / Hibrit

GitHub Codespaces, Gitpod ve docker-compose ile tarayıcı tabanlı ortamda Apache Airflow 2.x kurulumu, ilk DAG yazımı ve çalıştırma eğitimi.

Detayları Gör →
Veri Mühendisliği ve AmbarıSnowflake Architecture Eğitimi
Veri ve Analitik Eğitimleri

Snowflake Architecture Eğitimi

3 günOrtaOnline / Yüz Yüze / Hibrit

Snowflake üç katmanlı mimari eğitimi: mikro-bölümler, sanal ambarlar, clustering, result/warehouse cache ve Query Profile ile performans ilişkisi.

Detayları Gör →
Veri Mühendisliği ve AmbarıSnowflake Performance: Iceberg Tables, External Tables, and Views Eğitimi
Veri ve Analitik Eğitimleri

Snowflake Performance: Iceberg Tables, External Tables, and Views Eğitimi

2 günOrtaOnline / Yüz Yüze / Hibrit

Snowflake'te Apache Iceberg tabloları, external tablolar ve materialized/secure view'larla veri gölü performansını optimize etme eğitimi.

Detayları Gör →
Veri Mühendisliği ve AmbarıSnowflake Performance: Query Acceleration and Caching Eğitimi
Veri ve Analitik Eğitimleri

Snowflake Performance: Query Acceleration and Caching Eğitimi

2 günOrtaOnline / Yüz Yüze / Hibrit

Snowflake Query Acceleration Service, result/metadata/warehouse cache ve search optimization ile sorgu gecikmesini düşürme ve performans eğitimi.

Detayları Gör →
+90 (501) 369 40 14 WhatsApp [email protected] LinkedIn