Büyük veriyi yönetilen kümelerde işleyin
Bu eğitim, Amazon EMR ile bulutta yönetilen Hadoop ve Spark kümeleri kurmayı anlatır. Master, core ve task düğüm rolleri, EMR sürümleri ve uygulama seçimi, EMRFS ile S3 entegrasyonu, Spark ve Hive işleri, step ve bootstrap action, managed scaling, Spot düğüml…
EMR kümeleri, Spark ve Hadoop ile bulutta büyük veri işleme
Bu eğitim, Amazon EMR ile bulutta yönetilen Hadoop ve Spark kümeleri kurmayı anlatır. Master, core ve task düğüm rolleri, EMR sürümleri ve uygulama seçimi, EMRFS ile S3 entegrasyonu, Spark ve Hive işleri, step ve bootstrap action, managed scaling, Spot düğümleri, geçici ve kalıcı küme tasarımı, Glue Data Catalog ile Zeppelin ve EMR Studio kullanımı uygulamalı işlenir.
2 Gün. Her gün dört modül; her modülde altı konu başlığı, canlı gösterim ve uygulamalı laboratuvar.
Temel Seviye — Hadoop, Spark, küme yapılandırması, EMRFS ve maliyet optimizasyonu konularını kapsayan uygulamalı eğitim
Bulut hesabında konsol ve CLI ile adım adım laboratuvarlar yapılır, ardından kısa senaryo çalışmalarıyla pekiştirilir.
Dakikalar içinde Spark ve Hadoop kümesi başlatıp işi bitince kapatırsınız.
EMRFS ile depolama ve hesaplamayı ayırıp esnek mimari kurarsınız.
Spot ve managed scaling ile küme maliyetini azaltırsınız.
Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri
Bulut hizmet modelleri, bölge ve erişilebilirlik bölgesi kavramlarına genel aşinalık yeterlidir.
SQL ve temel Python ile Hadoop ve Spark kavramlarına giriş düzeyi aşinalık faydalıdır.
Güncel tarayıcı ve kararlı internet bağlantısı olan bir bilgisayar gerekir; laboratuvarlar için bir bulut hesabı veya kum havuzu ortamı kullanılır.
Terminalde temel gezinme ve JSON çıktısı okuma alışkanlığı laboratuvarları hızlandırır.
Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.
Program sonunda katılımcılar:
CLI ve konsol ile EMR kümesi oluşturabilirsiniz.
Primary, core ve task düğümlerini iş yüküne göre boyutlandırabilirsiniz.
S3'teki veri üzerinde depolama-hesaplama ayrımıyla çalışabilirsiniz.
PySpark ile veri okuyup dönüştürerek Parquet çıktısı üretebilirsiniz.
Geçici küme ve step yapısıyla tekrar edilebilir iş akışı kurabilirsiniz.
Managed scaling ve Spot ile küme maliyetini azaltabilirsiniz.
Security configuration ve Lake Formation ile erişimi yönetebilirsiniz.
Spark History Server ve loglarla yaygın performans sorunlarını teşhis edebilirsiniz.
Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.
Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.
Cloud Architect Cloud Run ve Functions eğitimi: Cloud Run, job, Eventarc ve Cloud Run functions uygulamaları. 2 günlük uygulamalı program.
Detayları Gör →
Cloud Architect MIG Kullanımı eğitimi: Instance template, MIG kurulumu, yük dengeleyici ve güncelleme. 2 günlük uygulamalı program.
Detayları Gör →
Cloud Developer Uygulamalar ve API ler eğitimi: API tasarımı, API Gateway, OAuth 2.0 ve istemci kütüphaneleri. 2 günlük uygulamalı program.
Detayları Gör →
Cloud Developer GKE ye Uygulama Dağıtımı eğitimi: Dockerfile, Artifact Registry, GKE manifestleri ve Skaffold. 2 günlük uygulamalı program.
Detayları Gör →
Cloud Developer Altyapı Tasarımı eğitimi: Compute ve veritabanı seçimi, VPC, IAM ve Terraform ile altyapı. 2 günlük uygulamalı program.
Detayları Gör →