Büyük veri ile neler yaptık?

Transkript

1 Büyük veri ile neler yaptık? Devrim Gündüz Principal Systems EnterpriseDB devrim.gunduz@enterprisedb.com EnterpriseDB Corporation. All rights reserved. 1

2 Kısaca... EnterpriseDB Kuzey Amerika merkezli bir veritabanı şirketi PostgreSQL tabanlı, Oracle uyumlu ticari bir veritabanı sunucusu var Gartner's Magic Quadrant 2013 raporundaki Challenger Büyük Veri ile Neler 2 Yaptık?

3 Sunumu hazırlarken... Çok çalıştım, gecelerimi gündüzüme kattım. 3

4 Sunumu hazırlarken... Çok çalıştım, gecelerimi gündüzüme kattım. Binlerce makale okudum 4

5 Sunumu hazırlarken Çok çalıştım, gecelerimi gündüzüme kattım. Binlerce makale okudum 5

6 Sunumu hazırlarken Çok çalıştım, gecelerimi gündüzüme kattım. Binlerce makale okudum Laptop! 6

7 Bunu yazmadan olur mu? 7

8 Big data Big data is like... 8

9 Big data Big data is like... HAYIR! :-) 9

10 Aslında... Klasik şeyleri her yerde duyuyoruz. 10

11 Aslında... Klasik şeyleri her yerde duyuyoruz. Herkesin verisi büyük! 11

12 Aslında... Klasik şeyleri her yerde duyuyoruz. Herkesin verisi büyük! 2002'de 50 MB'lık veri için Oracle sunucusu! 12

13 Aslında... Klasik şeyleri her yerde duyuyoruz. Herkesin verisi büyük! 2002'de 50 MB'lık veri için Oracle sunucusu! Peki sorun ne? 13

14 Aslında... 14

15 Gerekli veri, gereksiz veri (ben çizdim) 15

16 Sonuçta: 16

17 Büyük verileri işlerken... Büyük donanımlar (gereksiz) 17

18 Büyük verileri işlerken... Büyük donanımlar (gereksiz) Pazarlama kurbanı şirketler Açık kaynak koddan destek alamazsınız ;) 18

19 Büyük verileri işlerken... Büyük donanımlar (gereksiz) Pazarlama kurbanı şirketler Açık kaynak koddan destek alamazsınız ;) Yüksek maliyetli çözümler 19

20 Büyük verileri işlerken... İlişkisel (relational) veritabanları 20

21 Büyük verileri işlerken... İlişkisel (relational) veritabanları NoSQL? 21

22 Büyük verileri işlerken... İlişkisel (relational) veritabanları NoSQL? Çözümler hibrid olmalı (birazdan...) 22

23 Büyük verileri işlerken... Özgür Yazılım, Özgür Dünya! 23

24 Biz neler yaptık? Avrupa! ABN Amro 24

25 Biz neler yaptık? Avrupa! ABN Amro Santander 25

26 Biz neler yaptık? Avrupa! ABN Amro Santander BBVA 26

27 Biz neler yaptık? Avrupa! ABN Amro Santander BBVA Erste Gruppe 27

28 Biz neler yaptık? Avrupa! ABN Amro Santander BBVA Erste Gruppe The Cloud Networks 28

29 Biz neler yaptık? Avrupa! ABN Amro Santander BBVA Erste Gruppe The Cloud Networks... 29

30 Biz neler yaptık? Amerika! Statefarm (Fortune 500'de 44.) 30

31 Biz neler yaptık? Amerika! Statefarm (Fortune 500'de 44.) Sony Online Entertainment 31

32 Biz neler yaptık? Amerika! Statefarm (Fortune 500'de 44.) Sony Online Entertainment Mastercard 32

33 Biz neler yaptık? Amerika! Statefarm (Fortune 500'de 44.) Sony Online Entertainment Mastercard NASA 33

34 Biz neler yaptık? Amerika! Statefarm (Fortune 500'de 44.) Sony Online Entertainment Mastercard NASA Lockheed Martin 34

35 Biz neler yaptık? Amerika! Statefarm (Fortune 500'de 44.) Sony Online Entertainment Mastercard NASA Lockheed Martin... 35

36 Biz neler yaptık? Türkiye! Türksat 36

37 Biz neler yaptık? Türkiye! Türksat Sebit 37

38 Biz neler yaptık? Türkiye! Türksat Sebit RTÜK (SKAAS) 38

39 Biz neler yaptık? Türkiye! Türksat Sebit RTÜK (SKAAS) Büyük bir GSM operatörü 39

40 Biz neler yaptık? Türkiye! Türksat Sebit RTÜK (SKAAS) Büyük bir GSM operatörü Ak Yatırım 40

41 Biz neler yaptık? Türkiye! Türksat Sebit RTÜK (SKAAS) Büyük bir GSM operatörü Ak Yatırım TJK 41

42 Biz neler yaptık? Türkiye! Türksat Sebit RTÜK (SKAAS) Büyük bir GSM operatörü Ak Yatırım TJK Fizy 42

43 Biz neler yaptık? Türkiye! Türksat Sebit RTÜK (SKAAS) Büyük bir GSM operatörü Ak Yatırım TJK Fizy Biletix 43

44 Neden PostgreSQL, neden EnterpriseDB? Turhan Menteş'in açılış konuşmasındaki mesaj Yerli kaynaklar 44

45 Neden PostgreSQL, neden EnterpriseDB? Turhan Menteş'in açılış konuşmasındaki mesaj Yerli kaynaklar Özkan Dalbay Yerli (kendi) veritabanı sunucumuz Özgür Yazılım var? (DostgreSQL) 45

46 Neden PostgreSQL, neden EnterpriseDB? Turhan Menteş'in açılış konuşmasındaki mesaj Yerli kaynaklar Özkan Dalbay Yerli (kendi) veritabanı sunucumuz Özgür Yazılım var? (DostgreSQL) Maliyet Herşey değil! 46

47 Biz neler yaptık? TB'larca veriyi bellekte sıralama! 47

48 Biz neler yaptık? TB'larca veriyi bellekte sıralama! Yüzlerce işlemciyi paralel kullanma 48

49 Biz neler yaptık? TB'larca veriyi bellekte sıralama! Yüzlerce işlemciyi paralel kullanma Disk üzerindeki veriyi daha büyük blocksize ile saklama seçeneği 49

50 Biz neler yaptık? TB'larca veriyi bellekte sıralama! Yüzlerce işlemciyi paralel kullanma Disk üzerindeki veriyi daha büyük blocksize ile saklama seçeneği Düşük maliyet 50

51 Biz neler yaptık? TB'larca veriyi bellekte sıralama! Yüzlerce işlemciyi paralel kullanma Disk üzerindeki veriyi daha büyük blocksize ile saklama seçeneği Düşük maliyet Yerli mühendisler 51

52 Biz neler yaptık? Hibrid ortamlar SQL, NoSQL FDW Hadoop, MongoDB, Oracle, PostgreSQL! 52

53 Biz neler yaptık? Hibrid ortamlar SQL, NoSQL FDW Hadoop, MongoDB, Oracle, PostgreSQL! JSON / Hstore / XML 53

54 Sorular? Büyük Veri ile 54 Neler Yaptık?

55 Teşekkürler! Büyük Veri ile 55 Neler Yaptık?

56 Büyük veri ile neler yaptık? Devrim Gündüz Principal Systems EnterpriseDB devrim.gunduz@enterprisedb.com EnterpriseDB Corporation. All rights reserved. 56