Her şey dijital çağın başlangıcından bu yana ürettiğimiz veri miktarındaki patlama ile başlıyor. Bu, büyük ölçüde bilgisayarların, İnternet’in ve içinde yaşadığımız dünyadan veri yakalayabilen teknolojinin yükselmesinden kaynaklanmaktadır.
Kendi başlarına veriler yeni bir buluş değildir. Bilgisayarlardan ve veritabanlarından daha öncesine göz atarsak, hepsi işlem olan kayıtları, müşteri kayıtları ve arşiv dosyalarımız. Bilgisayarlar ve özellikle e-tablolar ve veritabanları, verileri kolayca erişilebilir bir şekilde büyük ölçekte depolayıp düzenlememizi sağladı. Aniden, tek tıkla bilgi elde edildi.
Yine de, e-tablolar ve veritabanlarından buyana çok yol kat ettik. Bugün, her iki günde bir, zamanın başından 2000 yılına kadar yaptığımız kadar veri üretiyoruz. Bu doğru, her iki günde bir. Ve oluşturduğumuz veri miktarı hızla artmaya devam ediyor; 2020 yılında, mevcut dijital bilgi miktarı bugün yaklaşık 5 zettabayttan 50 zettabayta yükseldi.
Günümüzde, yaptığımız hemen hemen her eylem dijital bir iz bırakıyor. Çevrimiçi olduğumuzda, GPS donanımlı akıllı telefonlarımızı taşıdığımızda, sosyal medya veya sohbet uygulamaları aracılığıyla arkadaşlarımızla iletişim kurduğumuzda ve alışveriş yaptığımızda veri üretiriz. Dijital ayak izlerini yaptığımız her şeyle bıraktığımızı söyleyebiliriz, bu neredeyse her şeydir.
Bunun da ötesinde, makine tarafından üretilen veri miktarı da hızla artmaktadır. “Akıllı” ev cihazlarımız birbirleriyle veya ev sunucularıyla iletişim kurduğunda veriler üretilir ve paylaşılır. Dünyadaki tesisler ve fabrikalardaki endüstriyel makineler, veri toplayan ve ileten sensörlerle giderek daha fazla donatılmaktadır.
“Büyük Veri” terimi, tüm bu verilerin toplanması ve bunları iş de dahil olmak üzere çok çeşitli alanlarda avantajımıza kullanma yeteneğimizi ifade ediyor.
Büyük Veri nasıl çalışır?
Büyük Veri, herhangi bir şey veya herhangi bir durum hakkında ne kadar fazla bilgi sahibi olursanız, yeni bilgiler edinebileceğiniz ve gelecekte ne olacağı konusunda tahminler yapabileceğiniz ilkesi üzerinde çalışır.
Daha fazla veri noktasını karşılaştırarak, daha önce gizlenmiş olan ilişkiler ortaya çıkmaya başlar ve bu ilişkiler öğrenmemizi ve daha akıllı kararlar almamızı sağlar.
En yaygın olarak, bu, toplayabildiğimiz verilere dayalı modeller oluşturmak ve daha sonra simülasyonlar çalıştırmak, veri noktalarının değerini her seferinde değiştirmek ve sonuçlarımızı nasıl etkilediğini izlemek için yapılır.
Bu süreç otomatiktir, günümüzün gelişmiş analitik teknolojisi, üzerinde çalıştığı sorunun çözümüne yardımcı olan bir model veya bir fikir bulana kadar olası tüm değişkenleri değiştirerek milyonlarca simülasyonu çalıştıracaktır.
Nispeten yakın zamana kadar, veriler elektronik tablolar veya veritabanlarıyla sınırlıydı ve hepsi çok düzenli sayılmazdı. Satır ve sütunlar halinde düzenlenmemiş herhangi bir şeyle çalışmak çok zordu. Ancak, depolama ve analitikteki ilerlemeler, birçok farklı türde veri yakalayabildiğimiz, depolayabildiğimiz ve bu tür verilerle çalışabileceğimiz anlamına geliyor. Sonuç olarak, “veri” artık veritabanlarından fotoğraflara, videolara, ses kayıtlarına, yazılı metinlere ve sensör verilerine kadar her şey anlamına gelebilir.
Tüm bu dağınık verileri anlamak için, Büyük Veri projeleri genellikle yapay zeka ve makine öğrenimi içeren en son analitiği kullanır. Örneğin, bilgisayarlara bu verilerin neyi temsil ettiğini tanımlamayı öğreterek – örneğin görüntü tanıma veya doğal dil işleme yoluyla – desenleri insanlardan çok daha hızlı ve güvenilir bir şekilde tespit etmeyi öğrenebilirler.
Büyük Veri nasıl kullanılıyor?
Bu sürekli büyüyen sensör bilgisi, fotoğraf, metin, ses ve video verileri akışı, artık verileri birkaç yıl önce bile mümkün olmayan şekillerde kullanabileceğimiz anlamına geliyor. Bu, neredeyse her sektörde iş dünyasında devrim yaratıyor. Şirketler artık müşterilerin hangi segmentlerinin ne zaman ve ne zaman inanılmaz derecede doğru bir şekilde satın almak isteyeceğini doğru bir şekilde tahmin edebiliyor. Ayrıca Büyük Veri, şirketlerin operasyonlarını çok daha verimli bir şekilde yürütmelerine yardımcı oluyor.
Sadece çalışırken değil, Büyük Veri projeleri dünyamızı çeşitli şekillerde değiştirmeye yardımcı oluyor:
- Sağlık hizmetlerinin iyileştirilmesi: Veriye dayalı tıp, hastalığın erken tespit edilmesine ve yeni ilaçlar geliştirilmesine yardımcı olabilecek kalıplar için çok sayıda tıbbi kayıt ve görüntünün analiz edilmesini içerir.
- Doğal ve insan kaynaklı felaketleri tahmin etmek ve bunlara müdahale etmek: Sensör verileri, depremlerin bir sonraki aşamada nereye vuracağını tahmin etmek için analiz edilebilir ve insan davranışı modelleri, kuruluşların hayatta kalanlara yardım etmesine yardımcı olacak ipuçları sunabilir.
- Büyük Veri teknolojisi: Mültecilerin dünyadaki savaş bölgelerinden akışını izlemek ve korumak için de kullanılmaktadır.
- Suçun önlenmesi : Polis güçleri, kaynakları daha verimli bir şekilde dağıtmak ve gerektiğinde caydırıcı olmak için kendi istihbaratlarına ve halka açık veri setlerine dayanan veri odaklı stratejileri giderek daha fazla benimsemektedir.
- Büyük Veri endişeleri: Büyük Veri bize eşi görülmemiş içgörüler ve fırsatlar sunar, ancak ele alınması gereken endişeleri ve soruları da gündeme getirir:
- Veri gizliliği: Şu anda oluşturduğumuz Büyük Veriler, kişisel hayatlarımız hakkında, çoğunu özel tutma hakkımız olan birçok bilgi içermektedir. Giderek, açıkladığımız kişisel veri miktarı ile Büyük Veri destekli uygulamaların ve hizmetlerin sunduğu kolaylık arasında bir denge kurmamız zorunlu hale getiriyor.
- Veri güvenliği: Birisinin belirli bir amaç için verilerimize sahip olmasından memnun olduğumuza karar versek bile, verilerin güvenliğini sağlamalarına güvenebilir miyiz?
- Veri ayrımcılığı: Her şey bilindiğinde, hayatlarına ilişkin verilerimize dayanarak insanlara karşı ayrımcılık yapmak kabul edilebilir olacak mı? Kimlerin para ödünç alabileceğine karar vermek için zaten kredi puanlaması kullanıyoruz ve sigorta büyük oranda veriye dayalı. Daha ayrıntılı olarak analiz edilmesini ve değerlendirilmesini bekleyebiliriz ve bunun daha az kaynağa ve bilgiye erişime sahip olanlar için hayatı zorlaştıracak bir şekilde yapılmamasına dikkat edilmelidir.
Bu zorluklarla yüzleşmek Büyük Veri’nin önemli bir parçasıdır ve verilerden yararlanmak isteyen kuruluşlar tarafından ele alınmalıdır. Bunun yapılmaması, işletmeleri yalnızca itibarları açısından değil, aynı zamanda yasal ve finansal olarak da savunmasız bırakabilir.
Geleceğe Bakış
Veriler dünyamızı ve yaşam tarzımızı benzeri görülmemiş bir oranda değiştiriyor. Büyük Veri bugün tüm bunları yapabiliyorsa sadece yarın ne yapabileceğini hayal edin. Kullanabileceğimiz veri miktarı artacak ve analiz teknolojisi daha gelişmiş hale gelecektir.
İşletmeler için, Büyük Veri’den yararlanma yeteneği önümüzdeki yıllarda giderek daha kritik hale gelecektir. Verileri stratejik bir varlık olarak gören şirketler, hayatta kalacak ve gelişecek şirketlerdir. Bu devrimi görmezden gelenler geride kalma ve hatta yok olma riski taşırlar.
