Apache Spark – Jupyter ve PySpark Kurulumu

Bu bölümde windows üzerinde PySpark kurulumu yapacağız

 

Adım 1 : Apache spark indirilir

Buradan uygun versiyon seçilip , sıkıştırılmış dosya indirilir

Adım 2 : İndirilen dosyayı bilgisayarımızda herhangi bir folder altına atalım (C:\programs\spark)

Adım 3 : winutils.exe dosyası indirilir ve  (C:\programs\spark\spark-2.2.1-bin-hadoop2.7\bin) altına kopyalanır

https://github.com/steveloughran/winutils/blob/master/hadoop-2.6.0/bin/winutils.exe?raw=true

Adım 4 : Java 7 ve üstü için kurulum yapılır

Adım 5 : Komut satırından alttaki değişkenler eklenir (User variable değişkenleri)

Yine user variable altında Path kısma alttaki ifade eklenir

Adım 6 : Komut satırından alttaki komut yazılır

Adım 7 : Komut satırından “jupyter notebook” komutuyla jupyter açılır

Adım 8 : Alttaki ifade test edilir

 

 


Bizi takip edebileceğiniz sosyal medya platformları

–> Facebook –> Linkedin  -> Twitter

Sorularınız için Big Data grubumuz (-> Facebook group)

Eğitim ve danışmanlıklar için sitemizi takip edebilirsiniz

 

Please follow and like us:

Yazar: serkan sakınmaz

serkansakinmaz@gmail.com

Bir Cevap Yazın