BÜYÜK VERİ Bülent DAL Genel Müdür bulent.dal@obase.com
İş Dünyası için VERİ, yönetilmesi gereken büyük DEĞER
BÜYÜK VERİ Nedir? Tipik veritabanı yazılım araçları ile yakalanması, depolanması, yönetimi ve analiz edilebilmesi yetkinlik sınırlarının ötesine geçen veri setlerini ifade etmektedir. Big Data: The next frontier for innovation, competetion and productivity Mc Kinsey Mayıs 2011
İşletm eler ve operasyonları her geçen gün daha fazla veriüretm ekte 30 m ilyar yeniiçerik Her ay Facebook a eklenm ekte 4 Exabyte Sensor Data Yıllk ı olarak RFID, GPS,telefonlar tarafndan ı üretilm ekte 10 Trilyon Text 2013 için projekte edilm ekte 35 Saatlik Video Her dakika YouTube a yüklenm ekte 8 Exabyte İş Verisi Her yılşirketler üretiyor 140 M ilyon Tw eet Her gün gönderilm ekte Kaynaklar: Facebook Statistics,YouTube Statistics,Tw eeter Statistics,M obile M arketing Center,IDC,The Econom ist
Dört güncel Mega Trend, şirketleri, sektörleri ve ekonomileri yeniden şekillendirmekte irketler Sektörler Ekonomiler
Neredeyse herşey artık YAZILIM! İnsanların yazdığı, taşıdığı ve dokunduğu herşey dijital ortama taşınıyor. İnsanların yazdığı ya da hatırlaması gereken herşey Yazılım İnsanların dokunduğu ve taşıdığı herşey Yazılım ile yer değiştiriyor
2000 li yıllar: Analog dan Dijitale geçiş Kaynak: Big Data, Mc Kinsey Mayıs 2011
Sosyal Ağlar ve Sosyal İş Yaşamı Ağustos 2012 de 1 Milyar kullanıcıya ulaşması bekleniyor. 12TB/gün «log data» üretiliyor. 2012 sonunda 400+ Milyon kullanıcıya ulaşması bekleniyor. 130 Milyon kullanıcı var. 100 million aktif kullanıcı. 12+ TB of tweet data/gün!..
Facebook un artan önemi Tüm insanlar n oldu u yer Tüm ki isel verilerin oldu u yer Tüm ba lant lar n oldu u yer Facebook Kullan c lar 750M nsan Etkile imde 750M insan n ba lant s 750M Toplam Kullan c 250M Mobil Kullan c Facebook lgisi 62 Dakika / Gün / Kullan c 5.3 Yeni Nesne / Gün / Kullan c Facebook Trafi i ¼ Amerika daki Sayfa Görüntüleme pay % 30 Tüm internet oturumlar içindeki facebook pay sim Do um Tarihi Ya Lokasyon Do um yeri E itim Okul Çal t Yer Aile Aktivite Check-in Ho land klar Hobileri Felsefe Arkada alar leti im Bilgisi Dünyan n en kapsaml ve güncel demografik ve ki isel bilgi veritaban 38% Tavsiyelerin kayna olarak Facebook Kaynak: Tim Campos, Facebook CIO Temmuz 2011 Herbir ki i: 130 farkl ki i 80 topluluk, grup, aktivite 9 favori marka&irket ile ba lant l
Herkes, herşey, her etkileşim eksoz gibi veri üretiyor
Sensor güdümlü ve enstrüman temelli iş dünyası. BÜYÜK miktarda veriyi, MAKİNA HIZINDA üretiyor. LH R JFK: 6 4 0 T Bs Her motor 10TB/30 Dk veri üretiyor.
Teknolojive kurum kültürü büyük veriye cevap verirse, katm a değer her geçen gün artacaktr ı. Büyük Veri sayesinde G lobalinform ation Created and Available Storage Exabytes 8000 7000 Inform ation created Büyük Fırs at fakat,ancak 250 M ilyar Teknolji ve Teknikler Büyük Veriye cevap verirs e Avrupa kam u sektörü yönetim inde yıllk ı kazanç 1. Büyük veri analizi $300 M ilyar 2. Büyük Veri 6000 5000 4000 Am erika yıllk ı kam u sektörü harcam alarnda ı düşüş Teknolojileri 3000 2000 Available storage Kaynak: 1000 $600 M ilyar Tüketicilokasyon bilgisini kullanarak elde edilecek yıllk ı gelir 3. Görselleştirme IDC, Gartner, Big Data: the next frontier fro innovation, competition, and productivity, McKinsey Global Institute, 2011.
Büyük Veri ye göre Karar Destek Sistemlerinin yeniden yapılandırılması
Büyük Veri nin Değere Dönüşmesi için 5 Yol Şeffaflık yarat Değişkenlerin etkisini anlayabilecek ortam yarat Aksiyonları özelleştirmek için kitleleri segmente et İnsan karar verme süreçlerini otomatik algoritmalar ile otomasyona geçir Yeni iş modelleri, ürünler ve hizmetler ile innovasyon yarat
Veri = Ürün
Veri Görselleştirmenin Yeni Yolları
Veri Görselleştirme/Bilgi Keşfi Tag Cloud Spatial Information Flow Clustergram History Flow
Yeni Veri Yönetim ve Depolama Bileşenleri
Büyük Veri ile öne çıkan başlıklar Büyük hacimli veriyi yönetmek için donanım ve yazılım teknolojileri Web 2.0 teknolojileri Veritabanı Ölçeklenmesi İlişkisel Veri Analitiği Dağıtık Veri Analitiği Dağıtık Dosya Sistemleri Gerçek zamanlı analitik
Servis Odaklı Karar Destek Sistemleri ile Analitik ve Büyük Veri yi Bulut a taşımak Information Management Data Management Data mart (Marketing) ERP OLAP Metadata Legacy ETL POS Routine Business Reporting Enterprise Data warehouse Data mart (Engineering) Dashboards Data mart (Finance) Intranet Search for Content Servers Text mining Automated Decision System Data mart (...) Software Text Data Services Text External data Data mining Simulation Other OLTP/wEB Replication Optimization Information Services Text Information Sources Operations Management Analytics Services LEVERAGING THE CAPABILITIES OF SERVICE-ORIENTED DECISION SUPPORT SYSTEMS: PUTTING ANALYTICS AND BIG DATA IN CLOUD Haluk Demirkan and Dursun Delen Department of Information Systems, W. P. Carey School of Business, Arizona State University Department of Management Science and Information Systems, Spears School of Business, Oklahoma State University
Büyük Verinin değer yaratabilmesi önündeki olası engeller
Teşekkürler.
Makro veri yeterli değil artık!
Detaylara inmek gerekiyor!
Büyük Veri Uygulama Kümeleri
BÜYÜK VERİ MİMARİSİ DW Appliance Kolon bazlı veritabanları In memory sistemler NoSQL MapReduce
Data generated by machines and sensors will exceed that generated by social media by at least a factor of 10. * Leon Katsnelson Program Director, Big Data & Cloud Computing IBM * Makina ve duyargalar, sosyal medyadan 10 kat daha fazla veri üretiyorlar.
Sosyal Ağlar ve Sosyal İş Yaşamı Google günde 24 Petabytes veri işliyor 4.6 Milyar telefonu var cep 2 Milyar Internet kullanıcısının 2013 deki yıllık trafiği 667 Exabytes