PostgreSQL 9.3 Kullanılabilirlik ve Başarım

Transkript

1 PostgreSQL 9.3 Kullanılabilirlik ve Başarım Devrim Gündüz 2013 EnterpriseDB Corporation. All rights reserved. Principal Systems EnterpriseDB devrim.gunduz@enterprisedb.com Twitter Linkedin: Web : 1

2 Başlamadan önce... #InternetteSansüreHayır! 2

3 Kim bu adam? Yani ben: 12 yıldan fazla bir süredir PostgreSQL'e katkı Hacker değilim RPM, web sitesi EnterpriseDB İstanbul! \m/ Güneş Deniz'in aslan babası, Burcu'nun sevgilisi, Deniz'in dayısı, Anıl'ın abisi. 3

4 Sunumu hazırlarken... Çok çalıştım, gecelerimi gündüzüme kattım. 4

5 Sunumu hazırlarken... Çok çalıştım, gecelerimi gündüzüme kattım. Binlerce makale okudum 5

6 Sunumu hazırlarken Çok çalıştım, gecelerimi gündüzüme kattım. Binlerce makale okudum 6

7 Sunumu hazırlarken Çok çalıştım, gecelerimi gündüzüme kattım. Binlerce makale okudum Google! :-) 7

8 En baştan söyleyelim! 8

9 PostgreSQL nedir? 35 yıllık geçmiş Açık kaynak kodlu Özgür: PostgreSQL (BSD+MIT) lisanslı Büyük bir topluluk 9

10 PostgreSQL nedir? Forkları da var: GreenPlum (BI) EnterpriseDB (Oracle) ExtenDB (BI) Netezza Vfabric Postgres Yahoo! Everest DostgreSQL!... 10

11 Herkesin büyük ve önemli verisi var: 11

12 Gerekli veri, gereksiz veri (ben çizdim) 12

13 Sonuçta: 13

14 Büyük verileri işlerken... Büyük donanımlar (gereksiz) 14

15 Büyük verileri işlerken... Büyük donanımlar (gereksiz) Pazarlama kurbanı şirketler Açık kaynak koddan destek alamazsınız ;) 15

16 Büyük verileri işlerken... Büyük donanımlar (gereksiz) Pazarlama kurbanı şirketler Açık kaynak koddan destek alamazsınız ;) Yüksek maliyetli çözümler 16

17 PostgreSQL 9.3 öncesi... Gömülü replikasyon 80+ işlemci desteği Neredeyse bütün mimarilere destek Standartlara uyumluluk Yüksek başarım 17

18 PostgreSQL Geliştiriciler için yeni özellikler DBA'ler için yeni araçlar Başarım yenilikleri...ve diğerleri 18

19 Geliştiriciler için özellikler Array veri tipi geliştirmeleri array_remove(), array_replace() JSON iyileştirmeleri 9.3'de JSON kullanılabilirliği arttı Hstore ilişkisi ( hstore_to_json() ) 9.4! 19

20 Geliştiriciler için özellikler LATERAL! Range veri tipi 9.2'de gelen özellik 9.3'deki iyileştirmeler SP-GiST desteği İstatistikler Yeni fonksiyonlar 20

21 Geliştiriciler için özellikler Auto-updatable viewlar Eskiden RULE ve TRIGGER gerektirirken... SQL 92 uyumluluğu Recursive View CREATE RECURSIVE VIEW (Eskiden: CREATE VIEW..WITH RECURSIVE) 21

22 Geliştiriciler için özellikler Materialized viewlar Çok yeni REFRESH, tabloyu kilitliyor SQL 92 uyumluluğu 22

23 Unutmayalım! #InternetteSansüreHayır! 23

24 COPY FREEZE Önceden FREEZE edilmiş satır girme imkanı VACUUM gereksinimi olmaz Tek transaction'da veri girilmesi %75'e yakın performans artışı 24

25 COPY PIPE COPY komutuna sistemden bir pipe vermek COPY apache_logs FROM PROGRAM 'zcat /var/log/httpd/ tar.gz' 25

26 Foreign Data Wrapper (Yaşasın!) SQL/MED 2 sürümdür olan bir özellik: FDW Oracle MongoDB MySQL CSV... 26

27 Foreign Data Wrapper (Yaşasın!) 9.3'de PostgreSQL FDW, üstelik yazılabilir! Dblink mi? :) Uzaktaki PostgreSQL tablolarını yerelde görebilme Performans iyileştirmeleri gerekli

28 Replikasyon geliştirmeleri timeline switching SR ile failover 28

29 Checksum Sayfa (page) seviyesinde checksum 16-bit Her veri sayfası (data page) için geçerli initdb anında etkinleştirilebiliyor Başarım? 29

30 SysV geliştirmeleri Artık sysv shared memory gereksinimi yok Sysctl de yok Öntanımlı shared_buffers arttı 30

31 İyileştirilmiş concurrency Yeni LOCK seviyeleri FOR KEY SHARE FOR NO KEY UPDATE FK işlemlerinde başarım artışı 31

32 Biz neler yaptık? Avrupa! ABN Amro 32

33 Biz neler yaptık? Avrupa! ABN Amro Santander 33

34 Biz neler yaptık? Avrupa! ABN Amro Santander BBVA 34

35 Biz neler yaptık? Avrupa! ABN Amro Santander BBVA Erste Gruppe 35

36 Biz neler yaptık? Avrupa! ABN Amro Santander BBVA Erste Gruppe The Cloud Networks 36

37 Biz neler yaptık? Avrupa! ABN Amro Santander BBVA Erste Gruppe The Cloud Networks... 37

38 Biz neler yaptık? Amerika! Statefarm (Fortune 500'de 44.) 38

39 Biz neler yaptık? Amerika! Statefarm (Fortune 500'de 44.) Sony Online Entertainment 39

40 Biz neler yaptık? Amerika! Statefarm (Fortune 500'de 44.) Sony Online Entertainment Mastercard 40

41 Biz neler yaptık? Amerika! Statefarm (Fortune 500'de 44.) Sony Online Entertainment Mastercard NASA 41

42 Biz neler yaptık? Amerika! Statefarm (Fortune 500'de 44.) Sony Online Entertainment Mastercard NASA Lockheed Martin 42

43 Biz neler yaptık? Amerika! Statefarm (Fortune 500'de 44.) Sony Online Entertainment Mastercard NASA Lockheed Martin... 43

44 Biz neler yaptık? Türkiye! Türksat 44

45 Biz neler yaptık? Türkiye! Türksat Sebit 45

46 Biz neler yaptık? Türkiye! Türksat Sebit RTÜK (SKAAS) 46

47 Biz neler yaptık? Türkiye! Türksat Sebit RTÜK (SKAAS) Büyük bir GSM operatörü 47

48 Biz neler yaptık? Türkiye! Türksat Sebit RTÜK (SKAAS) Büyük bir GSM operatörü Ak Yatırım 48

49 Biz neler yaptık? Türkiye! Türksat Sebit RTÜK (SKAAS) Büyük bir GSM operatörü Ak Yatırım TJK 49

50 Biz neler yaptık? Türkiye! Türksat Sebit RTÜK (SKAAS) Büyük bir GSM operatörü Ak Yatırım TJK Fizy 50

51 Biz neler yaptık? Türkiye! Türksat Sebit RTÜK (SKAAS) Büyük bir GSM operatörü Ak Yatırım TJK Fizy Biletix 51

52 Biz neler yaptık? TB'larca veriyi bellekte sıralama! 52

53 Biz neler yaptık? TB'larca veriyi bellekte sıralama! Yüzlerce işlemciyi paralel kullanma 53

54 Biz neler yaptık? TB'larca veriyi bellekte sıralama! Yüzlerce işlemciyi paralel kullanma Disk üzerindeki veriyi daha büyük blocksize ile saklama seçeneği 54

55 Biz neler yaptık? TB'larca veriyi bellekte sıralama! Yüzlerce işlemciyi paralel kullanma Disk üzerindeki veriyi daha büyük blocksize ile saklama seçeneği Düşük maliyet 55

56 Biz neler yaptık? TB'larca veriyi bellekte sıralama! Yüzlerce işlemciyi paralel kullanma Disk üzerindeki veriyi daha büyük blocksize ile saklama seçeneği Düşük maliyet Yerli mühendisler 56

57 Biz neler yaptık? Hibrid ortamlar SQL, NoSQL FDW Hadoop, MongoDB, Oracle, PostgreSQL! 57

58 Biz neler yaptık? Hibrid ortamlar SQL, NoSQL FDW Hadoop, MongoDB, Oracle, PostgreSQL! JSON / Hstore / XML 58

59 Unutmayalım! #InternetteSansüreHayır! 59

60 Sorular? 60

61 Teşekkürler! 61

62 PostgreSQL 9.3 Kullanılabilirlik ve Başarım Devrim Gündüz 2013 EnterpriseDB Corporation. All rights reserved. Principal Systems EnterpriseDB devrim.gunduz@enterprisedb.com Twitter Linkedin: Web : 62