HDFS'i mimarisinden yönetimine kavrayın
HDFS mimarisi, blok modeli, NameNode/DataNode içyapısı, yazma/okuma pipeline'ı, komutlar, snapshot, kota, balancer ve erasure coding gibi ileri özellikleri kapsayan derinlemesine eğitim.
HDFS mimarisi ve yönetimi odaklı derinlemesine eğitim
Bu eğitim, Hadoop Distributed File System'in (HDFS) mimarisini, veri akışını ve yönetimini derinlemesine ele alır. Blok tabanlı saklama ve replikasyon, NameNode metadata yönetimi (fsimage/edit log), DataNode heartbeat ve blok raporlama, yazma/okuma pipeline'ı, HDFS komutları ve dosya işlemleri, snapshot, kota, balancer, fsck ile tutarlılık, erasure coding ve HA'ya giriş gibi somut konuları kapsar. Katılımcı HDFS'i hem içeriden anlar hem de günlük dosya sistemi yönetim görevlerini uygular.
3 Gün. Her gün dört modül; her modül anlatım ve HDFS üzerinde komut labı içerir.
Orta Seviye — HDFS'in mimarisi, veri akışı, yönetimi ve ileri özellikleri.
Çalışan bir Hadoop ortamında HDFS komutları, snapshot ve bakım işlemlerini uygulayarak öğrenme.
Büyük verinin nasıl saklandığını blok düzeyinde kavrayarak sağlam temel kurarsınız.
Snapshot, kota ve balancer gibi günlük yönetim görevlerini uygulayabilirsiniz.
Replikasyon ve tutarlılık kontrolleriyle veri dayanıklılığını sağlarsınız.
Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri
Hadoop'un ne olduğuna dair giriş düzeyinde bilgi faydalıdır.
Komut satırı ve dosya sistemi kavramlarına aşinalık gerekir.
Replikasyon ve düğüm kavramına aşinalık avantaj sağlar.
HDFS erişimi olan bir Hadoop ortamı önerilir.
Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.
Program sonunda katılımcılar:
HDFS'in master-worker mimarisini açıklayabilirsiniz.
Blok yerleşimi ve replikasyon kararlarını kavrayabilirsiniz.
Yazma ve okuma pipeline'larını adım adım anlatabilirsiniz.
HDFS komutlarıyla dosya yönetimi yapabilirsiniz.
WebHDFS ve NFS gateway ile veriye erişebilirsiniz.
Snapshot ve kota ile veri yönetimi yapabilirsiniz.
Balancer, fsck ve safemode işlemlerini yürütebilirsiniz.
Erasure coding ve tiering gibi özellikleri değerlendirebilirsiniz.
Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.
Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.
Hadoop cluster yönetimi: çok düğümlü kurulum, NameNode HA, Capacity/Fair Scheduler, Kerberos, izleme, yedekleme ve sorun giderme. Uygulamalı ileri eğitim.
Detayları Gör →
Hadoop cluster mimarisi: NameNode/DataNode, blok modeli, HDFS write/read pipeline, veri yerelliği, YARN bileşenleri ve cluster boyutlandırma. Orta seviye eğitim
Detayları Gör →
Hadoop'ta veri analizi: Hive ve Impala ile SQL sorguları, Pig ile ETL, pencere fonksiyonları, veri kalitesi ve raporlama. Uygulamalı orta seviye eğitim.
Detayları Gör →
Hadoop'un tasarım ilkeleri: veri yerelliği, hataya dayanıklılık, yatay ölçekleme, write-once modeli ve ödünleşimler. Kavramsal orta seviye eğitim.
Detayları Gör →
Yönetici ve geliştirici için kapsamlı Hadoop: HDFS/YARN yönetimi, MapReduce, Hive, Pig, Sqoop ve Spark'a giriş. Uygulamalı orta seviye eğitim.
Detayları Gör →