R ile Metin Madenciliği | Bölüm 2/6
Önceki yazımız, Bölüm 1/6’da metin yapılarının ve düzenli metin formatının ne olduğundan bahsettik. Temel amacımız, tidytext kütüphanesi ile metinleri parçalamak ve kelime frekanslarını elde etmek. Bu yazı serisinde, tidytext kütüphanesi ile birlikte bolca dplyr ve ggplot2 kütüphaneleri kullanılacaktır. Bölüm 2/6’da ise bir metni anlamlandırmanın en kolay ve uygun yolu olan “Duygu Analizini” (sentiments analysis) öğreneceğiz. […]
R ile Metin Madenciliği | Bölüm 1/6
Bu uzun yazı serisi “Tidy Text Mining with R” kitabının derlenmesinden ortaya çıkmıştır. https://www.tidytextmining.com/ Her istatistiksel yöntem gibi temel amacımız, metin içerisinden anlamlı sonuçlar ortaya çıkarmaktır ve metin üzerinde yapılacak işlemlere de metin madenciliği adı verilir. Aşağıdaki kütüpaneler bu kitap içerisinde gerekli olan tüm kütüphanelerdir. library(dplyr) # Veri Manipülasyonu library(tidytext) # Düzenli Metin Araçları library(janeaustenr) […]
Büyük Veri Nedir?
Google’a “büyük veri nedir?” diye sorduğumuzda birçok tanım, birçok “V”, birçok bir şeyler denk gelecektir. Önemli bir etkinlikte bir Doçent hocamızın şu ifadesi çok güzeldi: “Yıllardır büyük veri ile ilgileniyorum ama hala ne olduğunu hala anlamadım.” Yaklaşın, ben anladım! 🙂 Bu büyük sırrı paylaşmaya karar verdim 🙂 Büyük veri iki farklı şekilde algılanıyor. Birincisi teknik […]
R ile Veri Görselleştirme
Her verinin bir hikayesi vardır. Bu hikayeyi en doğru şekilde aktarabilmek için veri işleme süreçlerimizin iyi bir şekilde birbirini takip etmesi gerekir. Hadley Wickham’ın R for Data Science kitabındaki veri işleme süreci şeması hikayeyi nasıl anlatacağımızı güzel bir şekilde özetlemiş. Temel olarak amacımız veri seti içerisindeki detayları ortaya çıkarmak ve genel resmi görmeye çalışmaktır. Buradan […]
Makine Öğrenmesi ile İstatistiksel Öğrenme Arasında Ne Fark Var?
Makine öğrenmesi ve istatistiksel öğrenme ifadeleri ne anlama gelmektedir? Veri bilimi kapsamında bu konular ile ilgili bir farkındalığın olması gerekmekte midir? Bu bilgiye sahip olmak neyi değiştirecektir? Problem çözme yaklaşımlarıma bir katkısı olacak mıdır? gibi sorulara yanıt olmasını umduğum bir takım bilgileri paylaşmak istiyorum. Öncelikle rolleri bakımından bilgisayar bilimleri ve istatistikçilerin yapay öğrenme konusundaki durumlarını […]
Arkadaş! Hani Bu Paranın Yazı Gelme Olasılığı Yüzde 50 idi?
Bak arkadaş atıyorum şimdi parayı hoop TURA, tekrar atıyorum TURA, tekrar atıyorum TURA, tekrar atıyorum YAZI, tekrar atıyorum TURA, ve tekrar TURA. 6 TURA 1 YAZI. Bu örnek olaylar üzerinden bir sonraki atacağım paranın yazı gelme olasılığı nedir? 1/6 = 0.16 Hani yüzde elli idi? Merhabalar, Yazı mı? tura mı? Genelde tura kazanıyor sanki hep. […]
Analitik Dikeyler ve Tidy Data’nın Önemi (büyük veri ile çalışan kurumlar için )
Büyük veri tamam peki ya büyük verinin analitiği? Büyük veri analitiğininde de çözülmüş olduğu durumda peki ya büyük veri kullanılarak üretilen veri bilimi projelerinin verimi, ölçeklenebilirliği, sürekliliği ve el değiştirme hızı? Yazının amacı veri bilimi projelerinin verimini artırmak, keşifsel analiz süreçlerini hızlandırmak ve keşiflerin kümülatif olarak değer yaratmasına ortam sağlamak üzere tavsiyelerde bulunmaktır. İki bölümden […]
AB Testi Nedir ? İstatistiksel A/B Testleri Nasıl Yapılır?
Bu yazıda İstatistiksel A/B testi, doğru yöntemlerin nasıl seçileceği ve A/B testlerinde dikkat edilmesi gereken noktalara değinilip bir örnek yapılacaktır. İki bölümde ele alınacak yazının birinci bölümü kavramsal ve sonuç odaklı, ikinci bölüm teknik olarak arka plandaki testler ve bu testlerin teorik çalışma prensipleri ile alakalı olacaktır. A/B testleri bir cümle ile özetlenecek olursa: Front-End […]
Artık Büyük Veri Var, İstatistiğe Gerek Yok (mu?)
Mesele “Big data” değil kardeeeş, bak resimdeki abileri kızdırıyorsun. 🙂 Bu büyük veri denilen şey nedir? Teknik olarak boyutundan dolayı geleneksel yöntemlerle işlenmesi mümkün olmayan verinin işlenme biçiminin fiziki ve yazılımsal anlamda değişmesidir. BU KADAR. Değişen tek şey verinin işlenme biçimidir. Biçimin değişmesinin sebebi de boyutudur. (Çeşitlilik, hız vs. girmiyorum) Elimizde daha yüksek boyutta verinin […]