DATA MIGRATION & EMR EĞİTİMİ

Büyük veri iş yüklerini Amazon EMR'a taşıyın

Şirket içi Hadoop/Spark iş yüklerini Amazon EMR ve S3'e göç ettirip ölçekleyin ve maliyeti optimize edin

Hadoop/Spark iş yüklerini Amazon EMR ve S3'e göç etmeyi, veri taşımayı ve maliyet optimizasyonunu öğreten ileri düzey eğitim.

3 gün İleri Seviye Online / Yüz Yüze / Hibrit Sertifikalı

Eğitim Hakkında

Amazon EMR'a büyük veri göçü ve iş yükü taşıma programı

Bu eğitim, şirket içi büyük veri iş yüklerini Amazon EMR'a (Elastic MapReduce) göç etme ve işletme becerisi kazandırır. EMR mimarisi (master/core/task node, EMRFS), S3 tabanlı veri gölü, HDFS'ten S3'e veri göçü (DistCp, AWS DataSync), Hive/Spark iş yükü taşıma ve uyumluluk ele alınır. Göç planlama ve değerlendirme, geçiş stratejileri (lift-and-shift vs yeniden mimari), kalıcı ve geçici (transient) kümeler, spot instance ve maliyet optimizasyonu, güvenlik (IAM, şifreleme) ve izleme işlenir. Katılımcı; örnek bir iş yükünü EMR'a göç planıyla taşır.

Süre ve Format

3 Gün. Her gün dört modül; EMR mimarisi, veri göçü, iş yükü taşıma ve optimizasyon üzerine uygulama.

Seviye

İleri Seviye — Amazon EMR'a veri göçü, Hadoop/Spark iş yükü taşıma, S3 veri gölü ve maliyet optimizasyonu

Öğrenme Metodu

AWS üzerinde örnek EMR kümeleri ve S3 veri gölüyle göç ve iş yükü taşıma senaryoları uygulamalı denenir.

Neden Bu Eğitim?

☁️Ölçekli Buluta Geçiş

Şirket içi küme sınırlarından kurtulup elastik, yönetilen büyük veriye geçersiniz.

💸Maliyet Kontrolü

Geçici küme ve spot instance ile iş yükü maliyetini belirgin biçimde düşürürsünüz.

🔀Depolama-Hesap Ayrımı

S3 ile veriyi hesaptan ayırarak esnek ve dayanıklı bir mimari kurarsınız.

Anahtar Konular

veri göçüdata migrationamazon emrhadoop göçüsparks3 veri gölüdistcpemrfsbulut göçümaliyet optimizasyonu
“Buluta göç, kodu değil mimariyi yeniden düşünmektir.”

Ön Koşullar

Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri

1
Hadoop/Spark temeli

HDFS, Hive ve Spark kavramlarına aşinalık gerekir.

2
Bulut temeli

Temel AWS ve IAM kavramları önerilir.

3
Komut satırı

Linux kabuk ve AWS CLI kullanımı faydalıdır.

4
AWS erişimi

Bir AWS hesabı veya örnek ortam erişimi gerekir.

Eğitim İçeriği

Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.

Günün hedefiKatılımcı EMR mimarisini kavrar ve göç planı yapar.
Modül 1
EMR Mimarisi
  • Master, core ve task node rolleri
  • YARN ve uygulama katmanı
  • EMRFS ve S3 entegrasyonu
  • HDFS vs S3 (EMRFS) seçimi
  • EMR sürümü ve uygulama seti
  • Kalıcı vs geçici (transient) küme
Modül 2
Göç Değerlendirme
  • Mevcut iş yükü envanteri
  • Bağımlılık ve veri hacmi analizi
  • Uyumluluk (Hive/Spark sürümü)
  • Değer ve risk önceliklendirme
  • TCO ve maliyet tahmini
  • Göç dalgaları planlama
Modül 3
Göç Stratejileri
  • Lift-and-shift
  • Yeniden platformlama (replatform)
  • Yeniden mimari (re-architect)
  • Paralel çalıştırma ve kesme (cutover)
  • Geri dönüş (rollback) planı
  • Strateji seçim kriterleri
Modül 4
S3 Veri Gölü
  • Bucket ve dizin düzeni
  • Depolama sınıfları ve yaşam döngüsü
  • Bölümleme ve dosya formatı
  • Glue Data Catalog
  • Erişim ve politika
  • Dayanıklılık ve versiyonlama
Günün hedefiKatılımcı veriyi ve iş yüklerini EMR'a taşır.
Modül 1
Veri Göçü
  • HDFS'ten S3'e DistCp
  • AWS DataSync ile taşıma
  • Snowball/offline büyük hacim
  • Artımlı ve doğrulamalı kopya
  • Checksum ile bütünlük kontrolü
  • Kesinti penceresi planlama
Modül 2
Hive Taşıma
  • Hive metastore göçü
  • Glue Catalog'a geçiş
  • Tablo ve bölüm yeniden kaydı
  • HQL uyumluluk kontrolü
  • Harici (external) tablo ve S3 konum
  • Sorgu doğrulama
Modül 3
Spark Taşıma
  • Spark iş uyumluluğu
  • spark-submit ve EMR adım (step)
  • Bağımlılık ve jar yönetimi
  • Konfigürasyon ayarı
  • S3 okuma/yazma optimizasyonu
  • İş çıktısı doğrulama
Modül 4
Orkestrasyon
  • EMR Steps API
  • Airflow/MWAA ile tetikleme
  • Step Functions entegrasyonu
  • Küme ömrü ve otomatik sonlandırma
  • Bağımlılık yönetimi
  • Yeniden deneme ve izleme
Günün hedefiKatılımcı EMR iş yükünü optimize eder ve işletir.
Modül 1
Maliyet Optimizasyonu
  • On-demand, spot ve reserved
  • Instance fleet ve filolar
  • Otomatik ölçekleme (managed scaling)
  • Geçici küme ile tasarruf
  • Veri ve hesap boyutlandırma
  • Maliyet izleme ve etiketleme
Modül 2
Performans
  • EMRFS ve S3 performansı
  • Dosya boyutu ve bölümleme
  • Spark bellek/paralellik ayarı
  • Veri yerleşimi (data locality) sınırı
  • Önbellek ve geçici depolama
  • İş profilleme
Modül 3
Güvenlik
  • IAM rolleri ve en az ayrıcalık
  • S3 şifreleme (SSE-KMS)
  • Transit şifreleme
  • VPC ve ağ izolasyonu
  • Lake Formation ile erişim
  • Denetim (CloudTrail)
Modül 4
Operasyon
  • CloudWatch metrik ve log
  • Alarm ve bildirim
  • Küme sağlığı izleme
  • Hata ayıklama ve log analizi
  • Göç sonrası doğrulama
  • İşletim runbook'u

Eğitim Kazanımları

Program sonunda katılımcılar:

✅
EMR Mimarisi

EMR node rolleri ve EMRFS/S3 mimarisini açıklayabilirsiniz.

✅
Göç Planı

İş yükü envanteri ve risk analiziyle göç planı yapabilirsiniz.

✅
Göç Stratejisi

Lift-and-shift ve yeniden mimari arasında seçim yapabilirsiniz.

✅
Veri Göçü

DistCp/DataSync ile HDFS'ten S3'e veri taşıyabilirsiniz.

✅
İş Yükü Taşıma

Hive ve Spark iş yüklerini EMR'a taşıyabilirsiniz.

✅
Maliyet

Spot ve geçici kümelerle maliyeti optimize edebilirsiniz.

✅
Güvenlik

IAM, KMS ve ağ izolasyonuyla iş yükünü güvenceye alabilirsiniz.

✅
Operasyon

CloudWatch ile EMR iş yükünü izleyip işletebilirsiniz.

Kimler İçin Uygundur?

  • Veri mühendisleri
  • bulut
  • platform mühendisleri ile Hadoop iş yüklerini buluta taşıyan ekipler için uygundur

Sıkça Sorulan Sorular

Bu eğitim kimler için uygundur?
Veri mühendisleri, bulut/platform mühendisleri ve Hadoop'u buluta taşıyan ekipler için uygundur.
EMR nedir?
Amazon EMR, yönetilen Hadoop/Spark büyük veri platformudur; mimari ve göçü eğitimde işlenir.
AWS bilmek şart mı?
Temel AWS ve IAM aşinalığı yeterlidir; EMR'a özgü konular eğitimde anlatılır.
Veri nasıl taşınır?
HDFS'ten S3'e DistCp ve AWS DataSync ile doğrulamalı taşıma uygulanır.
Sertifika veriliyor mu?
Eğitim sonunda Digital Vizyon Akademi Katılım ve Başarı Sertifikası verilir.

Sertifikalandırma

Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.

Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.

Örnek Sertifika d Digital Vizyon AKADEMİ KATILIM SERTİFİKASI Bu sertifika [Katılımcı Adı Soyadı] adlı katılımcının aşağıdaki eğitim programını başarıyla tamamladığını belgeler. Data Migration & EMR Eğitimi Sertifika Kodu DV-2026XX00 Tarih 26.10.2026 Yetkili İmza DV AKADEMİ

Eğitim Bilgileri

Süre3 gün
Seviyeİleri Seviye
FormatOnline / Yüz Yüze / Hibrit
Sertifika✓ Var
Hemen Bilgi Al
İlgili Eğitimler

Bu Eğitimle Birlikte Tercih Edilenler

Veri Analizi ve İstatistikIBM SPSS Statistics Essentials Eğitimi
Veri ve Analitik Eğitimleri

IBM SPSS Statistics Essentials Eğitimi

3 günTemelOnline / Yüz Yüze / Hibrit

IBM SPSS Statistics ile veri tanımlama, Recode/Compute dönüştürme, betimsel istatistik, t-testi, ANOVA, ki-kare ve raporlamayı menülerle uygulamalı öğrenin.

Detayları Gör →
Veri Analizi ve İstatistikIBP700 - Time Series Based Supply Planning Optimizer Eğitimi
Veri ve Analitik Eğitimleri

IBP700 - Time Series Based Supply Planning Optimizer Eğitimi

3 günOrtaOnline / Yüz Yüze / Hibrit

SAP IBP zaman serisi tabanlı tedarik planlaması ve Supply Optimizer ile maliyet, kapasite kısıtları, senaryo ve sonuç analizini uygulamalı öğrenin.

Detayları Gör →
Veri Analizi ve İstatistikIllustrating reports in Project Eğitimi
Veri ve Analitik Eğitimleri

Illustrating reports in Project Eğitimi

2 günTemelOnline / Yüz Yüze / Hibrit

Microsoft Project'te yerleşik ve özel raporlar, grafikler, Timeline, Gantt kritik yol ve Visual Reports ile Excel/Visio aktarımını uygulamalı öğrenin.

Detayları Gör →
Veri Analizi ve İstatistikImplement a Lakehouse with Microsoft Fabric (DP-601T00) Eğitimi
Veri ve Analitik Eğitimleri

Implement a Lakehouse with Microsoft Fabric (DP-601T00) Eğitimi

3 günOrtaOnline / Yüz Yüze / Hibrit

Microsoft Fabric'te Lakehouse: OneLake, kısayol, Dataflow Gen2, Spark notebook, Delta tabloları, medallion mimarisi ve DirectLake Power BI raporlamayı öğrenin.

Detayları Gör →
Veri Analizi ve İstatistikImplement Analytics Solutions Using Microsoft Fabric (DP-600) Eğitimi
Veri ve Analitik Eğitimleri

Implement Analytics Solutions Using Microsoft Fabric (DP-600) Eğitimi

4 günİleriOnline / Yüz Yüze / Hibrit

Microsoft Fabric DP-600: Lakehouse/Warehouse, boyutsal modelleme, semantic model, DAX, DirectLake, RLS güvenlik ve CI/CD ile uçtan uca analitik çözümü öğrenin.

Detayları Gör →
+90 (501) 369 40 14 WhatsApp [email protected] LinkedIn