Veriyi işleyin, doğru katmanda depolayın
Data Processing and Storage Eğitimi, büyük veriyi uçtan uca işlemeyi ve uygun katmanda depolamayı öğretir. Batch ve stream işleme, ETL/ELT süreçleri ve veri kalitesiyle başlanır; Apache Spark ile dağıtık işleme, Apache Kafka ile mesajlaşma ve stream motorları…
Toplu ve akış işlemeden ETL pipeline'larına; dağıtık depolama katmanları ve lakehouse
Data Processing and Storage Eğitimi, büyük veriyi uçtan uca işlemeyi ve uygun katmanda depolamayı öğretir. Katılımcılar batch ve stream işleme paradigmalarını, ETL/ELT süreçlerini ve veri kalitesini uygular. Apache Spark ile dağıtık toplu işleme, Apache Kafka ile mesajlaşma ve stream processing motorları işlenir. Lambda ve Kappa mimarileri, hot/warm/cold depolama katmanları, data lake, warehouse ve lakehouse ile veri yönetişimi ve orkestrasyon uygulamalı ele alınır.
3 Gün. Her gün dört modül; toplu işleme ve ETL'den akış işleme ve mesajlaşmaya, oradan depolama katmanları ve lakehouse mimarisine ilerlenir.
Orta Seviye — Toplu ve akış veri işleme (batch/stream), ETL/ELT, Spark, Kafka ile dağıtık depolama katmanları
Her konu Spark, Kafka ve örnek pipeline'lar üzerinde canlı veri akışları ve dönüşüm örnekleriyle adım adım uygulanır.
Toplu ve akış işlemeyi birlikte öğrenerek gecikme ve bütünlük gereksinimine göre doğru işleme modelini seçersiniz.
ETL/ELT süreçleriyle veri kalitesini koruyan, izlenebilir ve yeniden çalıştırılabilir veri boru hatları kurarsınız.
Data lake, warehouse ve lakehouse katmanlarını kurgulayarak maliyet ve performansı dengeli depolama tasarlarsınız.
Eğitimden verim almak için faydalı olacak temel bilgi ve deneyimler
Temel SQL ve ilişkisel veri kavramlarına aşinalık pipeline ve dönüşüm örneklerini takip etmeyi kolaylaştırır.
Python veya benzeri bir dilde temel programlama deneyimi Spark örnekleri için faydalıdır.
Dosya, dizin ve komut çalıştırma düzeyinde temel komut satırı aşinalığı yeterlidir.
Küme, düğüm ve paralel işleme gibi kavramlara genel aşinalık öğrenmeyi destekler.
Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.
Program sonunda katılımcılar:
Batch ve stream işleme arasındaki farkı kavrar, gecikme ve bütünlük gereksinimine göre doğru işleme modelini seçersiniz.
Extract, transform ve load aşamalarını tasarlar, veri kalitesini koruyan ve artımlı çalışan boru hatları kurarsınız.
Spark mimarisini kavrar, DataFrame ve Spark SQL ile dağıtık toplu işleme yapar ve shuffle ile bellek yönetimini uygularsınız.
Topic, partition ve consumer group kavramlarıyla Kafka üzerinde güvenilir mesajlaşma ve veri entegrasyonu kurarsınız.
Windowing, event time ve exactly-once garantisiyle gerçek zamanlı akış işleme uygulamaları tasarlarsınız.
Lambda ve Kappa mimarilerini karşılaştırır, senaryoya göre batch, stream veya hibrit mimari kararı verirsiniz.
Block, file ve object storage ile hot/warm/cold katmanları kurgulayarak maliyet ve performansı dengelersiniz.
Data lake, warehouse ve lakehouse ayrımını kavrar, Delta Lake ve medallion deseniyle güvenilir veri platformu kurarsınız.
Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.
Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.
NetApp ONTAP eğitimi: küme mimarisi, aggregate ve FlexVol hacimler, SVM, NFS/SMB ve iSCSI/FC protokolleri, verimlilik ve veri koruma uygulamalı olarak.
Detayları Gör →
NetApp ONTAP donanım arıza giderme eğitimi: FAS/AFF tanılama, disk ve controller FRU değişimi, güç/soğutma, boot ve HA kurtarma, partner servis süreçleri.
Detayları Gör →
NetApp ONTAP ileri ağ yönetimi eğitimi: port, VLAN, LACP ifgrp, broadcast domain, IPspace, subnet, LIF, failover ve QoS uygulamalı. Kurumsal ve online.
Detayları Gör →
ONTAP küme yönetimi eğitimi: küme kurulumu, RBAC, ağ ve SVM yönetimi, HA storage failover, kesintisiz yükseltme ve REST API otomasyonu uygulamalı.
Detayları Gör →
ONTAP NFS eğitimi: export politikaları, NFSv4 ve pNFS, LDAP/NIS kimlik eşleme, Kerberos güvenli NFS, çok protokollü erişim ve sorun giderme uygulamalı.
Detayları Gör →
ONTAP performans eğitimi: latency, IOPS ve throughput analizi, Storage QoS, Active IQ Unified Manager, Harvest/Grafana, darboğaz tespiti ve kapasite planlama.
Detayları Gör →