Kafka kümesini ölçekle, ayarla, dengele
Kafka küme işlemlerini ve yapılandırmasını derinleştiren ileri seviye eğitim: broker ekleme/çıkarma, partition yeniden atama ve leader dengeleme, broker/topic/istemci parametreleri, acks ve min.insync.replicas ile dayanıklılık, sıkıştırma ve batch ile perform…
Küme ölçekleme, yeniden atama, yapılandırma ve performans
Bu ileri seviye eğitim, bir Kafka kümesinin işletim operasyonlarına ve yapılandırmasına derinlemesine odaklanır. Küme ölçeklendirme (broker ekleme/çıkarma), partition yeniden atama (reassignment) ve throttle ile kontrollü dengeleme işlenir. Broker, topic ve istemci (producer/consumer) yapılandırma parametreleri; log retention, segment ve compaction ayarları; dayanıklılık ve tutarlılık dengesi (acks, min.insync.replicas) uygulanır. Performans ayarı: batch, linger, sıkıştırma, fetch ve throughput optimizasyonu; disk, page cache ve ağ darboğazları ele alınır. Rolling restart, sürüm yükseltme ve kapasite planlaması gösterilir. Katılımcılar bir kümeyi ölçeklendirip partition'ları yeniden atayarak performans ayarı yapar.
3 Gün. Her gün dört modül; katılımcılar ölçeklemeden yapılandırma ve performans ayarına derinleşir.
İleri Seviye — Kafka küme işlemleri: ölçeklendirme, partition yeniden atama, performans ayarı ve yapılandırmanın derinlemesine ele alınması.
Katılımcılar bir Kafka kümesinde broker ekleyip partition yeniden atayarak ve parametre ayarlarını ölçerek uygulamalı öğrenir.
Broker ekleyip partition'ları dengeleyerek kümeyi büyütürsünüz.
Dayanıklılık ve performans parametrelerini doğru ayarlarsınız.
Batch, sıkıştırma ve fetch ayarıyla throughput'u artırırsınız.
Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri
Kafka broker, topic ve replikasyon kavramlarına aşinalık beklenir.
Linux sistem yönetimi ve komut satırı bilgisi faydalıdır.
Disk, bellek ve ağ darboğazı kavramları yararlıdır.
Çok broker'lı bir Kafka kümesi erişimi.
Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.
Program sonunda katılımcılar:
Broker ekleyip çıkararak kümeyi ölçeklendirirsiniz.
Partition'ları throttle ile kontrollü yeniden atarsınız.
Preferred leader ile dengesizliği giderirsiniz.
Broker parametrelerini amaca göre yapılandırırsınız.
Retention, compaction ve ISR ayarlarını kurarsınız.
acks ve idempotent producer ile veri kaybını önlersiniz.
Sıkıştırma ve batch ayarıyla throughput'u artırırsınız.
perf-test ile performansı ölçer ve raporlarsınız.
Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.
Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.
Hadoop MapReduce'ta Combiner: yerel toplama, idempotentlik koşulları, in-mapper combining ve Counter ile ölçüm. Performans odaklı orta seviye eğitim.
Detayları Gör →
Amazon EMR'da Hadoop/Spark: node grupları, S3/EMRFS, cluster kurulumu, steps, otomatik ölçekleme, Spot Instance, IAM ve maliyet optimizasyonu. Orta seviye eğiti
Detayları Gör →
Hadoop'a hızlı başlangıç: tek düğümlü kurulum, yapılandırma, HDFS, YARN, ilk MapReduce işi ve Hive sorgusu. Uygulamalı başlangıç seviyesi eğitim.
Detayları Gör →
Apache Ranger ile merkezi Hadoop yetkilendirmesi: HDFS/Hive politikaları, satır filtreleme, sütun maskeleme, tag tabanlı erişim ve denetim. İleri seviye eğitim.
Detayları Gör →
Büyük verinin hacim ve hızını yönetip akıllı veriye çevirin: batch/stream işleme, Lambda/Kappa mimarisi, Kafka, Spark ve veri kalitesi. Orta seviye eğitim.
Detayları Gör →