BİG DATA NEDİR?

Big data herhangi ilişkisel veritabanları ile yönetilemeyecek büyüklükte olup büyümeye devam eden verilerdir. IDC’nin yayınladığı raporda 2020 lerde toplam sayısal verinin 35 zettabyte olması bekleniyor. Ayrıca 2020 de ulaşılacak veri miktarı 2009 un 44 katı olacak. Eskiden kişisel dosyalarımız disketlere veya birkaç CD ye sığarken artık TB lık yüksek kapasiteli disklere sığamaz hale geldi. Yine IDC nin istatistiklerine göre mevcut verinin %80 ni herhangi bir veri tabanında durmuyor. Bu verilere örnek olarak mailler , resim dosyaları , video dosyaları , ofis belgelerini verebiliriz. İşletmeler için durum çok daha karışıktır. İşletmeler bu devasa hız ve çeşitlilikte artan verileri depolanması ve analiz edilmesinde çok sorun çekiyorlar. Verinin büyümesiyle verinin saklama yeri sorunu, veriye ulaşma hızı, veri tabanındaki çeşitlilik, doğru veriye yetkili kişilerin erişebilmesi ve en önemlisi analiz edilmesi sorunu karşımıza çıkıyor. İşletmeler rekabet avantajı sağlayabilmeleri için hızlı davranmak zorundadırlar. Şu anki BL çözümlerinde oluşturulan OLAP küplerindeki data geneli de bir T anında ki değeri vermektedir. Büyük miktarda verinin analiz edilmesi için oluşturulan bu raporların çalışma süresi çok vakit almaktadır. Bu sorunun ortadan kalması için yazılım ve donanım üreticileri bir araya gelerek çözümler üretmeye başladılar. Eğer programcı bilgiyi Harddisk değil de RAM üzerinden alıp işleyebilirse bu hız sağlanabiliyor. SSD ler harddisk dünyasına yeni bir boyut açtı. Ama bu datalar için disk teknolojisi yetersiz. Datayı diskten alıp ram üzerinde tutmamız  ve yeri geldiğinde oradan datayı alıp işlememiz gerekmektedir. Örnek olark : Google’ ın veri indekslerini bildiğimiz veri tabanı yönetim sistemi ile tutmaya kalkması pek mümkün değil. Big data ile veritabanı sistemleri ve uygulama geliştirme dilleri değişecek. Bilişim teknolojisindeki hızlı gelişme ile işlemciler ve depolama alanları için giderek düşen birim maliyeti depolanabilir veri miktarının hızla artmasına ve işletmelerin bu verileri kullanmasında bir takım fonksiyonel aksamalarla sonuçlandı. Depolama alanının büyüklüğü ne olursa olsun günümüzde bu büyüklüğü doldurmaya yetecek miktarda veri sürekli artan bir hızla oluşmaktadır. A dan B ye gitmek için izlediğimiz rota ve hatta bir reklam izlemek için yapılan anlık duraksamalar gibi her işlem artık bir noktada kaydedilebilmektedir. Big data nın temel ilgusu aslında yeni bir şey değil de adı değişse de geçmişte de vardı. İnternet kullanımın patlama yapması ve sanal olarak da olsa insanlığın daha çok sosyalleşmesi, birçok yeni teknolojinin ulaşabilir ve ucuz hale gelmesi bizi bu devasa büyüyen veri okyanusun da yeni arayışlara itti. İş yapış biçimi de bizi buralara getirdi. Günümüz de BT sunduğu platform ile iş sahibinin özgürce veriyi keşfetmesini sağlayacak altyapılar sunmak zorunda. Geleneksel ilişkisel veri tabanları güncelliğini, OLTP işlevini artarak yerine getirmeye devam edecek.  Geçmişten günümüze kadar gelen süre içerisinde bilgi günden güne artmıştır hatta son yıllarda katlanarak günümüze gelmiştir. Bireysel olarak geçmişe kıyasla bu kadar büyük depolama alanlarına ihtiyaç duyulurken bir de kurumlar boyutunda bu olaya bakıldığında bilgi çöplüğü diye tabir ettiğimiz olgu gün yüzüne çıkmış oluyor. Birçok yazılım şirketleri bu konuyla ilgili arge çalışmaları yaptıktan sonra big data olgusu karşımıza çıkmıştır. Büyük veri toplumsal medya paylaşımları, ağ günlükleri , bloglar, fotoğraf, video, log dosyaları gibi değişik kaynaklardan toplanan tüm verinin anlamlı ve işlenebilir biçime dönüştürülmüş biçimine denir. Büyük veri kavramının geçmişi çok eskiye dayanmıyor.
-          www.karel.com
-          www.datawarehouse.gen.tr
-          www.pentasaftwareblog.com
-          www.oganozdogan.com      
-          www.kodcu.com