Hadoop'u Azure HDInsight ile bulutta işlet
Azure HDInsight ile yönetilen Hadoop ekosistemini bulutta kullanmayı öğreten orta seviye eğitim: küme türleri ve mimarisi, ADLS Gen2 (ABFS) entegrasyonu ile depolama-işlem ayrımı, portal/CLI/ARM ile küme oluşturma, Spark ve Hive işleri, Ambari yönetimi, autos…
HDInsight küme türleri, ADLS entegrasyonu, iş çalıştırma ve yönetim
Bu eğitim, Microsoft Azure HDInsight ile yönetilen Hadoop ekosistemini bulutta kullanmayı öğretir. Katılımcılar HDInsight küme türlerini (Hadoop, Spark, Hive LLAP, HBase, Kafka) ve mimarisini kavrar; Azure Data Lake Storage Gen2 (ABFS) entegrasyonu ile depolama-işlem ayrımını uygular. Küme oluşturma (portal, ARM/CLI), düğüm tipleri, otomatik ölçekleme ve maliyet yönetimi; Ambari ile servis yönetimi ve izleme; Spark/Hive işlerini çalıştırma ve zamanlama işlenir. Güvenlik tarafında Enterprise Security Package, Azure AD entegrasyonu ve ağ yalıtımı ele alınır. Eğitim, küme yaşam döngüsü ve maliyet optimizasyonu kararlarıyla tamamlanır.
3 Gün. Her gün dört modül; HDInsight küme kurulumundan veri entegrasyonuna, iş çalıştırma ve yönetime ilerlenir.
Orta Seviye — Azure HDInsight üzerinde Hadoop/Spark kümeleri kurma, veri yükleme, iş çalıştırma ve yönetme.
Katılımcılar Azure portal ve CLI ile HDInsight kümeleri oluşturup ADLS'ten veri işler, Ambari ile izler ve ölçekleme/güvenlik ayarlarını uygular.
HDInsight ile küme kurulum ve bakım yükünü azaltıp buluta taşırsınız.
Depolama-işlem ayrımıyla ADLS Gen2 üzerinde esnek veri işlersiniz.
Otomatik ölçekleme ve küme yaşam döngüsüyle maliyeti kontrol edersiniz.
Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri
HDFS, Hive ve Spark kavramlarına aşinalık güçlü biçimde faydalıdır.
Azure abonelik, kaynak grubu ve depolama kavramlarına aşinalık faydalıdır.
Azure CLI veya PowerShell ile temel komut çalıştırabilme beklenir.
Küme oluşturabilecek yetkide bir Azure aboneliği.
Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.
Program sonunda katılımcılar:
HDInsight Hadoop/Spark/Hive/Kafka türlerini iş yüküne göre seçersiniz.
Portal, CLI ve ARM ile tekrarlanabilir küme dağıtırsınız.
ABFS ile depolama-işlem ayrımını uygulayıp veri işlersiniz.
spark-submit ve Beeline ile işleri çalıştırıp izlersiniz.
Oozie ve Data Factory ile işleri zamanlayıp orkestre edersiniz.
Ambari ile servisleri yönetip kümeyi izlersiniz.
Autoscale ile yük ve zamana göre kümeyi ölçeklendirirsiniz.
ESP güvenliği kurar ve ephemeral küme ile maliyeti düşürürsünüz.
Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.
Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.
Apache Hive ile managed/external tablolar kurun, HDFS'ten veri yükleyin, partitioning ve bucketing uygulayın, HiveQL ile JOIN ve pencere fonksiyonları yazın.
Detayları Gör →
Büyük veri platformlarını işletin: YARN kaynak yönetimi, Airflow/Oozie orkestrasyon, veri yönetişimi, Kerberos/Ranger güvenlik, izleme ve maliyet optimizasyonu.
Detayları Gör →
Apache Flink işlerini üretimde yönetin: durum yönetimi, RocksDB backend, checkpoint/savepoint, exactly-once, Kubernetes/YARN dağıtım, backpressure ve rescaling.
Detayları Gör →
Microsoft Analytics Platform System MPP ambarını ve PolyBase ile Hive/HDFS entegrasyonunu öğrenin: hash/replicated dağıtım, CTAS, external table ve pushdown.
Detayları Gör →
Microsoft Fabric Lakehouse'ta Spark işlerinin CU tüketimini Capacity Metrics App ile izleyin: smoothing, bursting, throttling analizi ve pool optimizasyonu.
Detayları Gör →