INTRODUCTION TO AWS DATA PIPELINE EĞİTİMİ

Veri akışlarını tanımlayın ve modern araçlara taşıyın

Pipeline tanımı, data node, activity, resource, schedule, Task Runner, precondition ve Glue/Step Functions alternatifleri.

Eğitim, AWS Data Pipeline ile zamanlanmış veri taşıma ve işleme iş akışlarının mantığını anlatır. Pipeline tanım nesneleri, data node (S3, DynamoDB, RDS), activity (CopyActivity, EmrActivity, ShellCommandActivity), EC2/EMR resource, schedule, precondition, Ta…

2 gün Temel Seviye Online / Yüz Yüze / Hibrit Sertifikalı

Eğitim Hakkında

Zamanlanmış veri taşıma ve dönüştürme iş akışları

Eğitim, AWS Data Pipeline ile zamanlanmış veri taşıma ve işleme iş akışlarının mantığını anlatır. Pipeline tanım nesneleri, data node (S3, DynamoDB, RDS), activity (CopyActivity, EmrActivity, ShellCommandActivity), EC2/EMR resource, schedule, precondition, Task Runner, hata ve retry yönetimi ile birlikte servisin bakım moduna alındığı belirtilerek AWS Glue, Step Functions, MWAA ve EventBridge ile geçiş yaklaşımı ele alınır.

Süre ve Format

2 Gün. Her gün dört modül; pipeline nesne modeli, zamanlama, hata yönetimi ve modern servislere geçiş örnek tanımlarla işlenir.

Seviye

Temel Seviye — Veri akış tanımı, aktivite ve kaynak bileşenleri, zamanlama ve modern alternatiflere geçişi kapsayan giriş düzeyi yelpaze.

Öğrenme Metodu

Katılımcılar JSON pipeline tanımını inceler, S3-DynamoDB aktarımı yapan örnek bir hattı çalıştırır ve aynı akışı Glue ve Step Functions ile yeniden tasarlar.

Neden Bu Eğitim?

🔁Zamanlanmış akışlar

Veri taşıma ve dönüştürme işlerini düzenli çalışan hatlara dönüştürmeyi öğrenirsiniz.

🧱Nesne modeli

Data node, activity ve resource ilişkisini pipeline tanımında okursunuz.

➡️Modern geçiş

Mevcut hatları Glue ve Step Functions ile yeniden tasarlama yolunu görürsünüz.

Anahtar Konular

aws data pipelinedata pipeline eğitimietl awsaws veri akışıcopyactivityaws glue geçişstep functions veri hattıemr activityzamanlanmış veri taşımaaws veri mühendisliği
“Veri hattı, doğru zamanda doğru yere akan düzenli bir nehir gibi olmalıdır.”

Ön Koşullar

Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri

1
Temel bulut bilgisi

S3, EC2 ve temel veri depolama (RDS, DynamoDB) kavramları hakkında bilgi beklenir.

2
AWS hesabı

Uygulamalı laboratuvarlarda AWS Data Pipeline kaynakları oluşturabileceğiniz, bütçe uyarısı tanımlanmış bir AWS hesabı veya eğitmenin sağladığı lab hesabı gerekir.

3
Bilgisayar ortamı

Güncel bir tarayıcı, internet erişimi ve AWS CLI v2 kurabileceğiniz bir dizüstü bilgisayar yeterlidir.

4
Ek hazırlık

Temel JSON okuma ve ETL (çıkar-dönüştür-yükle) kavramı bilgisi faydalıdır.

Eğitim İçeriği

Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.

Günün hedefiKatılımcı pipeline tanımının bileşenlerini okur ve basit bir veri kopyalama hattı çalıştırır.
Modül 1
Data Pipeline Genel Bakış
  • Servisin amacı ve çalışma mantığı
  • Servisin güncel durumu (bakım modu)
  • Pipeline yaşam döngüsü
  • Konsol, CLI ve SDK ile tanım yükleme
  • IAM rolleri: DataPipelineDefaultRole, ResourceRole
  • Fiyatlandırma ve limitler
Modül 2
Data Node ve Veri Kaynakları
  • S3DataNode ve dizin/dosya yolları
  • DynamoDBDataNode ve kapasite ayarı
  • SqlDataNode ve JDBC
  • RedshiftDataNode
  • Şema ve format (CSV, TSV)
  • Veri kaynağı erişim izinleri
Modül 3
Activity Türleri
  • CopyActivity ile S3-RDS aktarımı
  • ShellCommandActivity ve betik çalıştırma
  • EmrActivity ve Hive/Pig işleri
  • HiveCopyActivity
  • SqlActivity
  • Aktivite bağımlılıkları (dependsOn)
Modül 4
Resource ve Task Runner
  • Ec2Resource ve instance tipi
  • EmrCluster yapılandırması
  • Task Runner ve worker group
  • Kaynak yaşam döngüsü ve terminateAfter
  • Spot kaynakların kullanımı
  • Ağ ve subnet ayarı
Günün hedefiKatılımcı zamanlama ve hata yönetimini yapılandırır, hattı güncel servislere dönüştürmeyi planlar.
Modül 1
Zamanlama
  • Schedule nesnesi ve period
  • startDateTime ve cron tarzı çalışma
  • Zaman serisi ve cron stilinde çalıştırma
  • Backfill ve geçmiş dönem çalıştırma
  • Çakışan çalıştırmalar
  • Zaman dilimi yönetimi
Modül 2
Precondition ve Hata Yönetimi
  • S3KeyExists ve S3PrefixNotEmpty
  • DynamoDBTableExists
  • Retry ve maximumRetries
  • onFail, onSuccess, onLateAction
  • SNS bildirimi
  • Manuel yeniden çalıştırma ve rerun
Modül 3
Örnek Hat: Günlük Veri Aktarımı
  • S3 CSV'den DynamoDB'ye aktarım
  • RDS tablo dışa aktarımı S3'e
  • Betik ile ön işlem
  • Log ve çıktıların S3'e yazılması
  • CloudWatch izleme
  • Maliyet ve kaynak temizliği
Modül 4
Modern Alternatiflere Geçiş
  • AWS Glue ETL job ve crawler
  • Step Functions ile iş akışı orkestrasyonu
  • Amazon MWAA (Airflow) DAG yaklaşımı
  • EventBridge Scheduler
  • DMS ile veritabanı aktarımı
  • Geçiş planı ve test

Eğitim Kazanımları

Program sonunda katılımcılar:

✅
Pipeline modeli

Data node, activity ve resource ilişkisini pipeline tanımında okuyabilirsiniz.

🔧
Data node

S3, DynamoDB ve RDS veri düğümlerini tanımlayabilirsiniz.

☁️
Activity kullanımı

CopyActivity ve ShellCommandActivity ile iş adımları oluşturabilirsiniz.

🔐
Resource yönetimi

EC2 ve EMR kaynaklarının yaşam döngüsünü ayarlayabilirsiniz.

📊
Zamanlama

Schedule ve backfill ile düzenli çalışan hatlar kurabilirsiniz.

🚀
Hata yönetimi

Precondition, retry ve SNS bildirimiyle hata yönetimini yapılandırabilirsiniz.

🧩
Örnek hat

Günlük S3-DynamoDB veri aktarım hattını çalıştırabilirsiniz.

🛠️
Geçiş planı

Hatları Glue ve Step Functions'a taşıma planı çıkarabilirsiniz.

Kimler İçin Uygundur?

  • Veri mühendisleri
  • BT operasyon uzmanları
  • mevcut Data Pipeline iş akışlarını sürdüren veya taşıyan ekipler için uygundur

Sıkça Sorulan Sorular

Bu eğitim kimler için uygundur?
Veri mühendisleri, BT operasyon uzmanları ve mevcut Data Pipeline iş akışlarını sürdüren veya taşıyan ekipler için uygundur.
Data Pipeline hâlâ önerilir mi?
Servis bakım modundadır; eğitimde mevcut hatların anlaşılması ve Glue, Step Functions, MWAA gibi güncel servislere geçiş yaklaşımı birlikte ele alınır.
Hangi veri kaynakları işlenir?
S3, DynamoDB, RDS ve Redshift veri düğümleri ile EC2 ve EMR çalıştırma kaynakları örneklenir.
Geçiş nasıl yapılır?
Mevcut pipeline nesneleri Glue job, Step Functions durumları ve EventBridge Scheduler karşılıklarıyla eşleştirilerek yeniden tasarlanır.
Eğitim sonunda hangi belge verilir?
Katılımcılara Digital Vizyon Akademi Katılım ve Başarı Sertifikası verilir. AWS'nin resmî sınavları için sınav başvurusu ve ücreti ilgili kuruma aittir; bu eğitim AWS Data Pipeline uygulama becerisine odaklanır ve sınav sonucu vaat etmez.

Sertifikalandırma

Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.

Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.

Örnek Sertifika d Digital Vizyon AKADEMİ KATILIM SERTİFİKASI Bu sertifika [Katılımcı Adı Soyadı] adlı katılımcının aşağıdaki eğitim programını başarıyla tamamladığını belgeler. Introduction to AWS Data Pipeline Eğitimi Sertifika Kodu DV-2026XX00 Tarih 27.10.2026 Yetkili İmza DV AKADEMİ

Eğitim Bilgileri

Süre2 gün
SeviyeTemel Seviye
FormatOnline / Yüz Yüze / Hibrit
Sertifika✓ Var
Hemen Bilgi Al
İlgili Eğitimler

Bu Eğitimle Birlikte Tercih Edilenler

Amazon AWSIntroduction to AWS Inferentia and Amazon EC Inf Instances Eğitimi
Bulut Bilişim Eğitimleri

Introduction to AWS Inferentia and Amazon EC Inf Instances Eğitimi

2 günTemelOnline / Yüz Yüze / Hibrit

AWS Inferentia ve EC2 Inf instances eğitimi: NeuronCore mimarisi, Neuron SDK, torch-neuronx ile model derleme, benchmark, SageMaker ve EKS dağıtımı.

Detayları Gör →
Amazon AWSIntroduction to AWS IoT 1-Click Eğitimi
Bulut Bilişim Eğitimleri

Introduction to AWS IoT 1-Click Eğitimi

2 günBaşlangıçOnline / Yüz Yüze / Hibrit

AWS IoT 1-Click eğitimi: cihaz, proje ve placement modeli, basış olayları, Lambda ve SNS aksiyonları ve AWS IoT Core ile eşdeğer mimariye geçiş uygulamaları.

Detayları Gör →
Amazon AWSIntroduction to AWS IoT Analytics Eğitimi
Bulut Bilişim Eğitimleri

Introduction to AWS IoT Analytics Eğitimi

2 günTemelOnline / Yüz Yüze / Hibrit

AWS IoT Analytics eğitimi: channel, pipeline, data store ve dataset modeli, SQL sorguları, Jupyter notebook, QuickSight ve Timestream tabanlı alternatif mimaril

Detayları Gör →
Amazon AWSIntroduction to AWS IoT Device Management Eğitimi
Bulut Bilişim Eğitimleri

Introduction to AWS IoT Device Management Eğitimi

2 günTemelOnline / Yüz Yüze / Hibrit

AWS IoT Device Management eğitimi: thing registry, fleet provisioning, thing group, IoT jobs ve OTA güncelleme, fleet indexing, secure tunneling ve Device Defen

Detayları Gör →
Amazon AWSIntroduction to AWS IoT Eğitimi
Bulut Bilişim Eğitimleri

Introduction to AWS IoT Eğitimi

2 günTemelOnline / Yüz Yüze / Hibrit

AWS IoT eğitimi: AWS IoT Core, MQTT, thing ve X.509 sertifikası, IoT Policy, Device Shadow, IoT Rules, Greengrass ve SiteWise ile IoT bulut mimarisine giriş.

Detayları Gör →
+90 (501) 369 40 14 WhatsApp [email protected] LinkedIn