Data Analysis ve Big Data'ye Giriş

Eğitim Hakkında

Python/pandas ile analiz ve Spark'a pratik geçiş

Bu temel seviye eğitim, veri analizine ve büyük veriye pratik bir giriş sağlar. Önce Python ve pandas ile veri yükleme, temizleme, filtreleme, gruplama ve temel görselleştirme işlenir. Ardından pandas'ın bellek sınırları ve büyük veri ihtiyacı anlatılarak Spark'a geçiş yapılır: SparkSession, DataFrame ve benzer işlemlerin dağıtık ölçekte nasıl çalıştığı gösterilir. Keşifçi veri analizi (EDA), özet istatistikler, basit trend ve gruplama analizleri ve pandas ile Spark arasındaki farklar ele alınır. Katılımcılar küçük bir veri setinde pandas ile analiz yapıp aynı mantığı Spark'a taşıyarak büyük veri dünyasına pratik bir başlangıç yapar.

Süre ve Format

2 Gün. Her gün dört modül; katılımcılar pandas ile analizden Spark'a geçişe pratik biçimde ilerler.

Seviye

Temel Seviye — Veri analizi ve büyük veriye pratik giriş: Python/pandas ile analiz ve Spark'a geçişin ele alınması.

Öğrenme Metodu

Katılımcılar küçük veri setlerinde pandas ile analiz yapıp aynı işlemleri Spark DataFrame ile tekrarlayarak öğrenir.

Neden Bu Eğitim?

🐍pandas ile Başla

Python ve pandas ile veri analizinin temellerini pratikte kaparsınız.

🔀Spark'a Geçiş

pandas sınırlarını görüp aynı analizi Spark'a taşırsınız.

📈Hızlı Pratik

İki günde gerçek veriyle uçtan uca küçük bir analiz yaparsınız.

Anahtar Konular

veri analizi girişpandasbig data girişspark dataframepython veri analiziedapysparkpandas vs sparkbüyük veri başlangıçveri analizi eğitimi

“Büyük veriye giden yol, küçük bir veri setini merakla incelemekten geçer.”

Ön Koşullar

Eğitimden verim almak için faydalı olacak bilgi ve ortam gereksinimleri

1

Python Temeli

Değişken, liste ve fonksiyon gibi temel Python bilgisi beklenir.

2

Veri Kavramı

Tablo, satır/sütun kavramlarına aşinalık faydalıdır.

3

Matematik Temeli

Ortalama ve yüzde gibi temel hesaplar yararlıdır.

4

Lab Ortamı

Python/pandas ve Spark (Colab olabilir) çalıştırabilen bir ortam.

Eğitim İçeriği

Programın gün gün akışı aşağıdadır. Bir güne tıklayarak o günün modüllerini ve içeriklerini görebilirsiniz.

Günün hedefiKatılımcı, pandas ile veri yükleyip temel analiz yapabilir.

Modül 1

pandas Temeli

Series ve DataFrame kavramı
read_csv ile veri yükleme
head, info, describe ile inceleme
Sütun seçimi ve indeksleme (loc/iloc)
Veri tipleri
Temel istatistikler

Modül 2

Temizleme

Eksik değer tespiti (isna)
fillna ve dropna
Tekilleştirme (drop_duplicates)
Tip dönüşümü (astype)
Aykırı değer farkındalığı
Sütun yeniden adlandırma

Modül 3

Dönüşüm ve Filtre

Boolean filtreleme
apply ile sütun türetme
sort_values ile sıralama
Yeni sütun hesaplama
map ve replace
Tarih alanlarıyla çalışma

Modül 4

Gruplama ve Görsel

groupby ile özetleme
agg ile çoklu metrik
pivot_table
value_counts
matplotlib ile basit grafik
Bulguların yorumu

Günün hedefiKatılımcı, pandas analizini Spark DataFrame'e taşıyabilir.

Modül 1

Neden Spark

pandas bellek sınırları
Büyük veri ihtiyacı
Dağıtık işleme mantığı
pandas ve Spark benzerliği
Ne zaman pandas ne zaman Spark
Spark kullanım senaryoları

Modül 2

Spark Temeli

SparkSession oluşturma
spark.read ile veri okuma
DataFrame inceleme (show, printSchema)
select ve filter
withColumn
Lazy evaluation ve action

Modül 3

Spark ile Analiz

groupBy ve agg
join ile birleştirme
orderBy ile sıralama
Temel pencere fonksiyonu
Sonuç yazma (write)
toPandas ile küçük sonuç alma

Modül 4

pandas vs Spark

API farkları
Indeks kavramının yokluğu
Lazy vs eager fark
Hata ayıklama yaklaşımı
Performans beklentileri
Geçiş için ipuçları

Eğitim Kazanımları

Program sonunda katılımcılar:

✅

pandas

pandas ile veri yükler, temizler ve analiz edersiniz.

✅

Temizleme

Eksik ve tekrarlı verileri pandas ile yönetirsiniz.

✅

Gruplama

groupby ve pivot ile özet analizler üretirsiniz.

✅

Görselleştirme

matplotlib ile sonuçları basitçe görselleştirirsiniz.

✅

Spark Geçişi

pandas sınırlarını anlar ve Spark'a geçersiniz.

✅

Spark DataFrame

Spark ile veri okuyup dönüşüm yaparsınız.

✅

Spark Analiz

groupBy ve join ile ölçekli analiz yaparsınız.

✅

Araç Seçimi

Ne zaman pandas, ne zaman Spark kullanacağınızı bilirsiniz.

Kimler İçin Uygundur?

Veri analizine yeni başlayanlar
Python bilen meraklılar
öğrenciler
büyük veriye ilk adımı atmak isteyenler için uygundur

Sıkça Sorulan Sorular

Bu eğitim kimler için uygundur?

Veri analizine yeni başlayanlar, Python bilen meraklılar ve büyük veriye ilk adımı atmak isteyenler için uygundur.

Python bilmek şart mı?

Temel Python bilgisi (değişken, liste, fonksiyon) gereklidir; pandas ve Spark eğitimde sıfırdan gösterilir.

Neden önce pandas sonra Spark?

pandas analizi kolay öğretir; sonra bellek sınırları gösterilip aynı mantık Spark ile dağıtık ölçeğe taşınır.

Derinlemesine Spark öğretiliyor mu?

Bu eğitim pratik bir giriştir; ileri Spark ve Spark SQL konuları ayrı eğitimlerde ele alınır.

Eğitim sonunda sertifika veriliyor mu?

Katılım ve değerlendirme sonrası Digital Vizyon Akademi Katılım ve Başarı Sertifikası verilir.

Sertifikalandırma

Bu eğitim Digital Vizyon Akademi Başarı Sertifikası ile tamamlanır.

Eğitim başında “Ön Test”, bitiminde “Son Test” uygulanarak gelişim ölçümlenir. Değerlendirme formunu dolduran katılımcılar sertifikalarını alır. Sertifikanızın geçerliliğini Sertifika Sorgulama sayfasından doğrulayabilirsiniz.

Örnek Sertifika

DATA ANALYSIS VE BİG DATA'YE PRATİK BİR GİRİŞ - GÜN EĞİTİMİ