Apache Spark ML Kütüphanesi: Pipelines Örnek Uygulama
1. Giriş Merhabalar. Bildiğimiz gibi Spark, büyük veri dünyasının en popüler analitik motoru. Özellikle durağan büyük boyutlu veriler (persistent data) üzerinde hızlı bir şekilde makine öğrenmesi algoritmalarını çalıştırabilmesi Spark’ı farklı kılan özelliklerin başında geliyor. Arkadaşımız o kadar yetenekli ki sadece durağan verileri işlemiyor, aynı zamanda akan verileri de işleyebiliyor. Spark’ın makine öğrenmesi için bir kütüphanesi var. […]
Ensemble Yöntemler (Topluluk Öğrenmesi): Basit Teorik Anlatım ve Python Uygulama
1. Enseble Yöntemler Nedir? Bir Benzetme Sınıflandırma algoritmaları ile bir nesnenin hangi sınıfa dahil olacağını tahmin etmeye çalışırız. Birçok sınıflandırma yöntemi arasından probleme uygun olanı seçer, gerekli optimizasyonları yapar ve yüksek doğruluk oranlarını yakalamaya çalışırız. Peki bu işi 3-5 tane sınıflandırıcı ile yapsak veya aynı sınıflandırıcıyı aynı eğitim setinin farklı alt kümeleri ile eğitsek ve her birine […]
İşte Veri Önümde, Şimdi Ne Yapacağım?
Heh veriyi okuttuk sonunda. İşte veri, bakıyorum şöyle, veri bu ve önümde. Şimdi ne yapacağım? Öncelikle böyle durum ile karşı karşıya kalınması başlı başına bir problemi ifade etmektedir. DS (data science) proje döngüsü altında bir anda önünüze böyle bir veri gelmez. Bu sebeple bu yazı veri bilimi proje döngüsü yazısı bağlamında hazırlanmamıştır. Gelen […]
Veri Bilimi Proje Döngüsü
Veri Bilimi Projesi Nasıl Yapılır? Her DS (data science) projesini kapsayan akış döngüleri yapmak çok mümkün olamamaktadır. Fakat yine de içerisinde ML çıktısı olan projeler için bir DS proje döngüsü nasıl olmalıdır sorusu yanıtlanmaya çalışılacaktır. Microsoft’un dökümanlarında yer alan bir görsel: Hadley Wickham’ın R for Data Science kitabında yayınlanan görsel: Yukarıdaki döngülerin hangi […]
Veri Bilimci Olmak İçin Yol Haritası
Merhaba Veri Bilimci Adayı! 1. Veri Bilimi ile İlgili Tüm Etkinliklere Katıl Türkiye’de ücretsiz düzenlenen etkinlikler var, hatta ücretli olanlara da git ki kıymeti olsun. Bunları zaman kaybetmeden takip etmeye ve etkinliklere katılmaya başla. Bu sana veri bilimi dilini öğretecek, kavramları daha hızlı tanımana sebep olacak, işin uzmanlarından bilgi edinmeni sağlayacak ve en önemlisi daha […]