Büyük Veri
3 379
Büyük Veri Spark Veri hazırlığı Veri Ön İşleme

Apache Spark 2.3.0 OneHotEncoderEstimator: Scala Örnek Uygulaması

Apache Spark 2X’e geçtikten sonra dördüncü sürümünü genel kullanıma sundu. Son sürüm 2.3.0. Bu sürümle birlikte gelen bir çok yenilik arasında MLlib kütüphanesindeki OneHotEncoderEstimator da yer...

Erkan ŞİRİN Erkan ŞİRİN 3 sene önce
3 379
Büyük Veri Spark Veri hazırlığı Veri Ön İşleme

Apache Spark 2.3.0 OneHotEncoderEstimator: Scala Örnek Uygulaması

Apache Spark 2X’e geçtikten sonra dördüncü sürümünü genel kullanıma sundu. Son sürüm 2.3.0. Bu sürümle birlikte gelen bir çok yenilik arasında MLlib kütüphanesindeki OneHotEncoderEstimator da yer...

Erkan ŞİRİN Erkan ŞİRİN 3 sene önce
0 4368
Büyük Veri Hadoop

Hadoop HDFS Nedir?

HDFS Hadoop projesinin en temelinde bulunan çok büyük hacimli verileri depolamak için tasarlanmış java tabanlı dağıtık bir dosya sistemidir. Hatalara karşı dayanıklıdır. Ölçeklenebilir. Düşük maliyetlidir....

Erkan ŞİRİN Erkan ŞİRİN 4 sene önce
0 1243
Büyük Veri Makine Öğrenmesi Regresyon Scala Spark

Çoklu Doğrusallık Sorunu Çözümünde VIF

Çoklu regresyon analizinde bağımsız niteliklerin bağımlı nitelik üzerindeki etkisi incelenir. Bazı bağımsız nitelikler birbirleriyle yüksek doğrusal korelasyona sahip olduğundan bağımlı değişken üzerindeki etkisi dağılır. Modelin sadeliği va...

Erkan ŞİRİN Erkan ŞİRİN 4 sene önce
3 1145
Büyük Veri Lojistik Regresyon Makine Öğrenmesi Sınıflandırma Spark

Apache Spark ML Kütüphanesi: Pipelines Örnek Uygulama

1. Giriş Merhabalar. Bildiğimiz gibi Spark, büyük veri dünyasının en popüler analitik motoru. Özellikle durağan büyük boyutlu veriler (persistent data) üzerinde hızlı bir şekilde makine öğrenmesi...

Erkan ŞİRİN Erkan ŞİRİN 4 sene önce
0 176
Büyük Veri Hadoop

BG9: Sanal Makineleri Kopyalama ve Parolasız (Passworless-SSH) Bağlantısı

Baz şablon sunucu hazırlandıktan sonra bunu cluster planındaki sunucu sayısı kadar çoğaltıyoruz. Benim planımda 6 sunucu kurmak vardı, o yüzden 6 tane kopyaladım. Bu yazıda...

Erkan ŞİRİN Erkan ŞİRİN 4 sene önce
0 255
Büyük Veri Hadoop

BG10: Hadoop Cluster Planı

Hadoop clusterında bulunacak servislerin sunuculara dağıtımına cluster planlaması diyoruz. Hangi servis hangi sunucuda çalışacak, master nodelar hangileri, slave nodelar hangileri, edge server hangisi olacak, meta...

Erkan ŞİRİN Erkan ŞİRİN 4 sene önce
0 293
Büyük Veri Hadoop

BG14: Ambari ile Cluster Kurulumu

Şimdiye kadar Ambari Server kurduk. Artık Ambari ile Hadoop cluster kurabiliriz. Çalışmıyorsa Ambari Server’ı çalıştıralım. node3 sunucusundan ambari-server start komutuyla çalıştıralım. Daha sonra tarayıcıdan http://node3.datalonga.com:8080 adresine...

Erkan ŞİRİN Erkan ŞİRİN 4 sene önce
0 785
Büyük Veri Scala Spark

Spark Dataframe Operasyonları-1: İndeks Ekleme ve Sütun Sırasını ve Türünü Değiştirme

Merhaba, bu yazımızda veri ön hazırlığı aşamasında veri yüklerken, Spark Dataframe oluştururken, dataframe şekillendirirken, onu dönüştürürken, dataframe üzerinde veri keşfi yaparken vb. işlemler için kullandığım...

Erkan ŞİRİN Erkan ŞİRİN 4 sene önce
Bunları Okudun Mu?
×

Bir Şeyler Ara