Seminarium: Systemy Rozproszone
11 kwietnia 2013, godzina 12:15, sala 4070
Miłosz Pacholczyk

Analiza zapisu pracy klastra Google

Parę lat temu firma Google udostępniła dwa zestawy danych dotyczących charakterystyki i aktywności swoich klastrów obliczeniowych. Ujawniają one dość specyficzne problemy, z którymi mierzy się na co dzień scheduler w systemie zarządzania klastrem w Google. Są to głównie:

• różnorodność zlecanych prac (zestawów zadań),
• rzadko spotykany stopień komplikacji wymagań zadań co do docelowych maszyn,
• różnorodność zasobów sprzętowych,
• niedokładna specyfikacja wymagań sprzętowych zadań przez użytkowników.

Podczas seminarium przedstawię oba zestawy danych oraz wnioski płynące z ich analizy. Szczególną uwagę będę poświęcał wskazówkom do projektowania algorytmów przydzielających maszyny do zadań. Omówię także rezultaty badań dotyczących charakteryzacji obciążenia (workload) w celu generowania sztucznego obciążenia na potrzeby benchmarków oraz przewidywania zmian w obciążeniu.

Zapraszam!
Miłosz Pacholczyk