Büyük veriden içgörüyü uçtan uca çıkar
Büyük veri setlerinden içgörü üretmeyi öğreten orta seviye eğitim: veri profilleme ve temizleme, SQL ve Spark ile agregasyon, join ve pencere fonksiyonları, zaman serisi/kohort/segment analizi, görselleştirme ve dashboard tasarımı ile bulguları karara bağlaya…
Keşif, SQL/Spark analizi, görselleştirme ve içgörü
Bu orta seviye eğitim, büyük veri setlerini analiz ederek içgörü üretmeye odaklanır. Analiz süreci: problem tanımı, veri keşfi (profiling), temizleme ve hazırlık işlenir. SQL ve Spark DataFrame ile filtreleme, gruplama, agregasyon, join ve pencere fonksiyonları uygulanır. Zaman serisi analizi, kohort ve segment analizi, temel istatistiksel yorum ve anomali tespiti ele alınır. Sonuçların görselleştirilmesi, gösterge paneli tasarımı ve bulguların hikâyeleştirilmesi (data storytelling) anlatılır. Katılımcılar gerçek bir veri seti üzerinde keşiften görselleştirmeye uçtan uca bir analiz yürütür ve iş kararına bağlanan içgörüler üretir.
3 Gün. Her gün dört modül; katılımcılar keşiften analize ve görselleştirmeye uçtan uca ilerler.
Orta Seviye — Büyük veri setlerinde keşif, SQL ve Spark ile analiz, görselleştirme ve içgörü üretiminin uçtan uca ele alınması.
Katılımcılar gerçek veri setleri üzerinde SQL ve Spark sorgularını yazıp sonuçları görselleştirerek uygulamalı öğrenir.
Büyük veri setlerini profilleyerek doğru soruya ulaşırsınız.
SQL ve Spark ile agregasyon ve pencere analizini uygularsınız.
Bulguları karar vericiyi ikna eden içgörülere dönüştürürsünüz.
Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri
SELECT, JOIN ve GROUP BY içeren SQL yazımına aşinalık beklenir.
Tablo, metrik ve boyut kavramlarına aşinalık yararlıdır.
Ortalama, dağılım gibi kavramlar faydalıdır.
SQL/Spark ve görselleştirme aracı çalıştırabilen bir ortam.
Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.
Program sonunda katılımcılar:
Büyük veri setlerini profilleyip kaliteyi değerlendirirsiniz.
Eksik ve aykırı değerleri yöneterek veriyi hazırlarsınız.
SQL/Spark ile çok boyutlu özetler üretirsiniz.
Trend ve kümülatif hesapları pencere fonksiyonlarıyla yaparsınız.
Kohort, segment ve huni analizlerini uygularsınız.
Doğru grafik ve dashboard ile sonucu sunarsınız.
Bulguları doğru ve dürüst biçimde yorumlarsınız.
İçgörüyü ikna edici bir karara dönüştürürsünüz.
Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.
Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.
Veri analitiği temelleri, SQL ve Python (pandas) ile analiz ve Hadoop/Spark ile büyük veri işlemeyi uçtan uca öğrenin. Uygulamalı giriş eğitimi.
Detayları Gör →Hive'da ARRAY, MAP, STRUCT ve JSON gibi iç içe veriyi LATERAL VIEW, explode ve get_json_object ile modelleyip sorgulamayı uygulamalı öğrenin.
Detayları Gör →Apache Kafka temelleri: topic, partition ve offset yönetimi, producer ve consumer geliştirme, consumer group ve offset commit'i uygulamalı öğrenin.
Detayları Gör →HDFS üzerinde dosya yönetimi: hdfs dfs komutları, blok ve replikasyon, dosya formatları, sıkıştırma ve fsck ile sağlık kontrolünü uygulamalı öğrenin.
Detayları Gör →Spark'ın çekirdeği RDD'yi öğrenin: map/filter/reduceByKey dönüşümleri, lineage ve DAG, shuffle, partition ve persist ile performans yönetimi.
Detayları Gör →