ODTÜ Kampüs Izgara Hesaplama Uygulaması

Transkript

1 ODTÜ Kampüs Izgara Hesaplama Uygulaması Mete Özay, Tuğba Taşkaya Temizel Enformatik Enstitüsü ODTÜ

2 Taslak Kampüs Izgara Hesaplama Mevcut Uygulamalar ODTÜ Kampüs Izgara Hesaplama Sistem Testleri ODTÜ Kampüs Izgara Hesaplama Uygulama Testleri Sistem Değerlendirmeleri Sonuç

3 Kampüs Izgara Hesaplama Uygulamaları Kampüs Izgara Hesaplama Üniversite altyapılar larında yer alan, farklı depolama ve hesaplama kaynaklarının n tek bir problemi çözmek için i in bir Izgara üzerinde birleştirilmesi

4 Mevcut Uygulamalar OMII-UK Campus Grid Windows ve Linux işletim sistemleri arasında, doğrudan haberleşmeye olanak sağlamaktadır 2 temel arabirim kullanılmaktadır GridSAM Doğrudan Erişim Arabirimi (The Direct GridSAM Interface) Uygulama Yönetimi Arabirimi ( The Managed Execution Interface)

5 OMII-UK Campus Grid Arabirim Seçimi GridSAM Doğrudan Erişim Arabirimi İş ş yükleme işleminde daha yüksek kontrol imkanı ve esneklik GridSAM dışındaki Ağ Servis arabirimlerine iş gönderilmesini desteklememekte Tek tip kaynak kullanımında Uygulama Yönetim Mimarisi arabirimi Iş tanımları için kısıtlı bir genel komut desteği Birden fazla tipte kaynak kullanımında

6 Mevcut Uygulamalar Condor Izgara Hesaplama Yazılımı Yüksek Verili Berim (High Throughput Computing) geliştirme ve uygulama yazılımı Yüksek Verili Berim Yüksek hesaplama ve depolama kaynak gücü gerektiren, uzun zamanlı işler için kullanılmaktadır. Heterojen kaynak kullanımı için uygundur.

7 Condor Mimarisi Şekil 2: Condor Mimarisi

8 BOINC Diğer Izgara Hesaplama Yazılımları GridBUS Globus

9 ODTÜ Kampüs Izgara Hesaplama Sistem Testleri Donanım Altyapısı Windows Linux işletim sistemlerinden oluşan hibrid kaynak sistemler P4 Dual Core PC Ethernet bağlantı

10 ODTÜ Kampüs Izgara Hesaplama Sistem Testleri İstemciler Windows XP işletim sistemi yüklü bilgisayar sistemleri Condor yazılımı (Condor 7.1) ) ve OMII-UK yazılımı ayr denendi. Kaynak Yöneticisi ayrı ayrı Ubuntu 8.04 işletim sisteminde Condor yazılımı (Condor 7.1) Scientific Linux (SL) 5.0 işletim sisteminde OMII-UK Sunucular Donanım Altyapısı Windows XP işletim sistemi yüklü sistemler Yüksek Başarımlı Berim Laboratuvarında yer alan, Red Hat Linux Enterprise 3 işletim sistemi yüklü 7 işlemcili Yüksek Başarımlı Berim küme bilgisayarı

11 ODTÜ Kampüs Izgara Hesaplama Sistem Testleri OMII-UK Campus Grid Yazılım Deneyimi Scientific Linux (SL) 5.0 ve Windows XP SP2 işletim sistemleri İstemci makinalar Windows XP Kaynak olarak kullanılacak olan makinaların, ve bağlantı kuracakları merkez sunucuların Linux işletim sistemi yüklü olması zorunluluğu Kısıtlı dil desteği Melez Izgara Hesaplama uygulamalarında zayıf

12 Condor Yazılım Test Ortamı 3 Condor İş Evreni üzerinde testler Vanilya Evreni : Yeniden bağlanmaya (relinking) ihtiyaç duymayan işler için kullanılmaktadır. Kabuk işler Standard Evren: Uzaktan sistem çağrısına izin veren, seri işlerde kullanılmaktadır. C, C++ ve Fortran gibi işlerin çalışmasına izin vermektedir. Evren üzerinde, uzaktan dosya işlenmesi gibi işlemler yapılabilmektedir

13 Condor Yazılım Test Ortamı Java Evreni Java işlerini çalıştırmakta kullanılmaktadır. Condor kabuk yazılımlarına bağlı kalmaksızın, JVM üzerinden dosya çağrılması ve işlenmesi gibi operasyonlar bu evren üzerinde gerçekleşmektedir.

14 Test Senaryoları Kontrol noktasi deneyleri Senaryo1: Kontrol Makinası Ubuntu; İş Yükleyici Makina Windows Vanilya ve Java Evrenleri kontrol noktası özelliğini desteklememektedir Standard Evren Condor içerisine gömülü olan condor_compile ile derlenmi miş işler desteklenmektedir

15 Test Senaryoları Kontrol Makinası RHLE; İş Yükleyici Makina: Senaryo2: Windows XP Senaryo 1 deki durumdan ötürü, bu senaryoda da başarı sağlanamamıştır. Senaryo3: Kontrol Makinası Windows XP ; İş Yükleyici Makina: Ubuntu, ve Kontrol Makinası Windows XP ; İş Yükleyici Makina: RHLE Windows makinalar, sistem dosya erişimlerinin kısıtlığından ötürü, kontrol noktası işlemine izin vermemektedir.

16 Test Senaryoları Senaryo4: Kontrol Makinası Ubuntu; İş Yükleyici Makina: RHLE Vanilya ve Java evrenlerinde kontrol noktası çalışmamaktadır. Standart evren testlerinde başarı sağlanmıştır.

17 Test Sonuçları OMII-UK yazılımı, hibrid sistemler için etkin çözümler sunamamaktadır. Condor yazılımı altında, kontrol noktası Windows XP yüklü olduğu durumlarda, kontrol noktası işlemleri gerçekleşememektedir. Condor yazılımından bağımsız olarak, kullanıcı tanımlı kabuk yazılımlar ile kontrol noktası tanımlanabilir.

18 ODTÜ Kampüs Izgara Hesaplama Uygulama Testleri ODTÜ Matematik Enstitüsü Araştırma Görevilisi ve Doktora Öğrencisi Sedat Akleylek tarafından gerçekleştirilen RSA şifreleme algoritmasının çözümünü sağlayan Euclid çarpanlara ayırma algoritması. C++ ile geliştirilmiş çalıştırılabilir dosyalar Windows XP üzerinden, iş betikleri ile sunuculara gönderilmiştir. Kontrol makinası: Ubuntu 8.04

19 ODTÜ Kampüs Izgara Hesaplama Uygulama Testleri Fizik Bölümü nden Y. Lisans öğrencisi Serkan Polad ın tez çalışmaları Gaussian 2003 moleküler yapı hesaplama yazılımı Sunucu Makina: RHEL 3.4 yüklü YBB küme bilgisayarı Kontrol Makinası: Ubuntu 8.04

20 Sistem Değerlendirmeleri

21 Sistem Güvenlik Karşılaştırmaları

22 Sonuç Kampüs Izgara Hesaplama Uygulamalarında Condor çözümü, Globus ve GridBUS gibi diğer uygulamalar ile birlikte uygulanabilir. Windows yüklü sistemlerde, güvenlik için, 3. parti çözümler kullanılmalıdır. Yazılımsal veya donanımsal güvenlik duvarları Sertifikalandırma yöntemleri

23 Sonuç Windows Sistemlerden Oluşan Lab.lar Linux/Unix Sistemlerden Oluşan Lab.lar Sunucular Küme Bilgisayarlar İstemciler İstemciler İstemciler Etkin bir kullanım için, heterojen sistemler, homojen alt kümelere bölünmelidir.

24 Sonuç Evren, arabirim ve kaynak seçimleri, uygulama tipine ve boyutuna uygun olarak seçilmelidir. Kontrol noktası özelliği gerektiren uygulamalar için, Linux/Unix işletim sistemi yüklü kaynaklar tercih edilmelidir.

25 Sonuç Izgara Hesaplama mimarisine ayrılacak kampüs kaynakları, mevcut yazılım çözümleri üzerinden belirlenememektedir. Kaynak yönetimi: Küme Bilgisayar kaynaklarında, arabirim üzerinden, Lab. kaynaklarında, işletim sistemi özellikleri ve 3. parti yazılımlar ile yönetilmelidir.

26 Teşekkürler