Apache Spark – MySql Bağlantısı

spark-mysql-output

Bu bölümde Apache Spark ile MySql bağlantısından bahsedeceğiz

Eğer windows üzerinde mysql kurulumunuz yoksa XAMPP gibi programlarla makinenize rahatlıkla MySql kurabilirsiniz

Download XAMPP 


Mysql kurulumundan sonra komut satırından basit bir veritabanı ve tablo oluşturalım

Komut satırından mysql’e bağlanalım

mysql-connect

Daha sonra books veritabanı ve bu veritabanı altında authors tablosu oluşturalım

mysql-create-db

Bu tabloya örnek veriler insert edelim

mysql-create-insert

Java ile Maven üzerinden Apache Spark projesi oluşturalım . pom dosyası kütüphaneleri şu şekilde olacaktır

Burada mysql ile bağlantı yapacağımız için mysql driver eklenir


Apache spark üzerinden jdbc bağlantısı yapabilmek için jdbc metodu kullanmamız gerekir

Kullanımı şu şekildedir

  • url : mysql url bilgisi  (jdbc:mysql://localhost:3306/books  gibi)
  • table : tablo ismi
  • properties : kullanıcı adı ve şifre gibi bilgiler

Örnek kod

Çıktı şu şekilde olacaktır

spark-jdbc-output

Bu bölümde Apache Spark ile mysql üzerinden sorgulama yaptık.Diğer büyük veri yazıları için sitemizi takip edebilirsiniz


Bizi takip edebileceğiniz sosyal medya platformları

–> Facebook –> Linkedin  -> Twitter)

Please follow and like us:

Yazar: serkan sakınmaz

serkansakinmaz@gmail.com

Bir Cevap Yazın

E-posta hesabınız yayımlanmayacak. Gerekli alanlar * ile işaretlenmişlerdir