Azure Fiziksel Veri Depolama Eğitimi

Eğitim Hakkında

Azure üzerinde fiziksel depolama yapıları, indeksleme ve dosya yerleşimi

Eğitim, mantıksal modelin Azure üzerinde fiziksel olarak nasıl yerleştirileceğini işler. Synapse hash/round-robin/replicated dağıtımı, clustered columnstore ve rowgroup, B-tree indeksler, tablo bölümleri, sıkıştırma (PAGE/ROW/archive), Parquet satır grupları, Delta dosya yerleşimi ve Z-ORDER, ADLS klasör düzeni, Cosmos DB fiziksel partition ve index policy ile Azure SQL dosya grubu kavramları ele alınır.

Süre ve Format

2 Gün. Her gün dört modül; her modülde mimari anlatım, Azure portal laboratuvarı ve kısa senaryo çalışması yer alır.

Seviye

Orta Seviye — Azure veri servislerinde fiziksel yerleşim, dağıtım, indeksleme, sıkıştırma ve dosya düzenini kapsayan eğitim

Öğrenme Metodu

Aynı veri seti farklı fiziksel düzenlerde yüklenir, planlar ve süreler ölçülerek tasarım kararları kanıtlanır.

Neden Bu Eğitim?

💽Fiziksel Tasarım

Dağıtım, indeks ve sıkıştırma kararlarını sorgu desenine göre verirsiniz.

📏Ölçümlü Karar

Plan ve süre karşılaştırmasıyla her tasarımın etkisini kanıtlarsınız.

🗃️Dosya Düzeni

Parquet ve Delta dosya boyutu ile yerleşimini optimize edersiniz.

Anahtar Konular

fiziksel veri depolamaazure columnstoresynapse dağıtımparquet row groupdelta lake optimizecosmos db index policyindeks tasarımıazure sql performansveri sıkıştırmaazure veri mühendisliği

“Fiziksel düzen, aynı verinin bir saniyede veya bir dakikada okunmasını belirler.”

Ön Koşullar

Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri

1

SQL bilgisi

T-SQL ile temel sorgu yazabilmek ve ilişkisel veri kavramlarını bilmek beklenir.

2

Azure temelleri

Kaynak grubu, depolama hesabı ve abonelik kavramlarına aşinalık gerekir.

3

Veri kavramları

ETL/ELT, veri ambarı ve veri gölü terimlerine genel hakimiyet faydalıdır.

4

Azure aboneliği

Laboratuvarlar için ücretsiz veya deneme Azure aboneliği kullanılır.

Eğitim İçeriği

Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.

Günün hedefiKatılımcı Azure SQL ve Synapse tablolarında dağıtım, indeks ve bölüm tasarımını fiziksel olarak uygular.

Modül 1

Depolama Motoru Temelleri

Sayfa, extent ve veri dosyası yapısı
Row store ve column store farkı
Transaction log ve WAL mantığı
Azure SQL dosya ve depolama mimarisi
Hyperscale sayfa sunucuları
tempdb ve geçici nesneler

Modül 2

İndeksleme

Clustered ve nonclustered B-tree
Covering index ve INCLUDE kolonları
Filtered index ve columnstore index
Parçalanma (fragmentation) ve bakım
Missing index DMV ve Query Store
Memory-optimized tablo tanıtımı

Modül 3

Synapse Fiziksel Tasarımı

Hash dağıtım kolonu seçimi
Replicated ve round-robin kullanım
Clustered columnstore rowgroup kalitesi
Tablo bölümleme ve partition switch
CTAS ile yeniden tasarım
İstatistik ve veri hareketi analizi

Modül 4

Sıkıştırma ve Depolama Maliyeti

ROW ve PAGE sıkıştırma
Columnstore archive sıkıştırma
Sıkıştırma tahmini sp_estimate_data_compression_savings
Büyük nesne (LOB) depolama
Sıkıştırmanın CPU etkisi
Depolama ve DWU maliyeti ilişkisi

Günün hedefiKatılımcı dosya tabanlı ve NoSQL depolarda fiziksel yerleşim ve indeks politikalarını ayarlar.

Modül 1

Parquet ve Dosya Yapısı

Row group, column chunk, page yapısı
Parquet sıkıştırma ve kodlama (dictionary)
Footer metaverisi ve predicate pushdown
Optimal dosya boyutu hedefleri
Küçük dosya problemi ve birleştirme
Avro ve ORC ile karşılaştırma

Modül 2

Delta Lake Fiziksel Yerleşim

Delta log ve checkpoint dosyaları
Dosya yeniden yazma ve compaction
OPTIMIZE, ZORDER ve liquid clustering
Data skipping istatistikleri
VACUUM ve depolama temizliği
Partition ve dosya sayısı dengesi

Modül 3

Cosmos DB Fiziksel Mimari

Fiziksel partition, replica set, RU/s
Index policy: included/excluded path
Composite ve spatial indeks
Indexing mode ve yazma maliyeti
Değiştirilebilir throughput: autoscale
Depolama limiti ve bölme (split)

Modül 4

Karşılaştırmalı Laboratuvar

Aynı veriyi üç farklı düzende yükleme
Sorgu planı ve okunan bayt karşılaştırması
Depolama maliyeti ölçümü
Tasarım hatalarının geri alınması
Tasarım karar kaydı hazırlama
Sonuçların sunumu

Eğitim Kazanımları

Program sonunda katılımcılar:

✅

Depolama motoru

Sayfa, extent ve columnstore yapısını açıklayabilirsiniz.

✅

İndeks tasarımı

Covering ve filtered indeksleri sorgu desenine göre tasarlayabilirsiniz.

✅

Synapse dağıtımı

Hash ve replicated dağıtım kararlarını verinin biçimine göre verebilirsiniz.

✅

Sıkıştırma

ROW, PAGE ve columnstore sıkıştırmayı doğru yerde kullanabilirsiniz.

✅

Parquet yapısı

Row group ve predicate pushdown mantığını yorumlayabilirsiniz.

✅

Delta yerleşimi

OPTIMIZE ve ZORDER ile dosya yerleşimini iyileştirebilirsiniz.

✅

Cosmos indeks

Index policy ile yazma maliyetini düşürebilirsiniz.

✅

Ölçümlü tasarım

Karşılaştırmalı testlerle fiziksel tasarım kararlarını kanıtlayabilirsiniz.

Kimler İçin Uygundur?

Veri mühendisleri
veritabanı geliştiricileri
performans ayarı yapan veri mimarları için uygundur

Sıkça Sorulan Sorular

Bu eğitim kimler için uygundur?

Veri mühendisleri, veritabanı geliştiricileri ve performans ayarı yapan veri mimarları için uygundur.

Mantıksal modelleme eğitimiyle farkı nedir?

Burada dağıtım, indeks, sıkıştırma ve dosya yerleşimi gibi fiziksel kararlar işlenir.

Ölçüm yapılır mı?

Evet, aynı veri farklı düzenlerde yüklenip plan ve süre karşılaştırılır.

Hangi servisler?

Azure SQL, Synapse, Data Lake (Parquet/Delta) ve Cosmos DB ele alınır.

Belge verilir mi?

Digital Vizyon Akademi Katılım ve Başarı Sertifikası verilir.

Sertifikalandırma

Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.

Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.

Örnek Sertifika

DATA ENGINEERING ON MICROSOFT AZURE: PHYSICAL DATA STORAGE STRUCTURES EĞİTİMİ