ZGŁOŚ PROBLEM
ODSYŁACZE
Link do zasobu (skrót):
http://azon.e-science.pl/zasoby/47067Link do zasobu (repozytorium):
https://id.e-science.pl/records/47067Metadane zasobu
Tytuł |
Dane rozliczeniowe klastra obliczeniowego WCSS Wariant tytułu: Dane rozliczeniowe klastra obliczeniowego Wrocławskiego Centrum Sieciowo-Superkomputerowego |
---|---|
Osoby |
Partner:
Politechnika Wrocławska |
Opis |
Pseudoanonimowe dane rozliczeniowe klastra obliczeniowego są danymi, które zbiera system kolejkowy klastra (tzw. Workload manager), w celu późniejszego rozliczania zużytych zasobów przez użytkowników, grupy, granty. Kiedy użytkownik zleca do wykonania zadanie na klastrze obliczeniowym wysyła żądanie zasobów do systemu kolejkowego. Od tego momentu system kolejkowy zarządza całym procesem życia zleconego zadania, odnotowując przy tym każdą istotną czynność/zmianę w procesie życia zadania, aż do uzyskania wyników końcowych. Czuwanie nad działaniem systemu kolejkowego pozwala nie tylko na rozliczanie użytkowników, ale ułatwia również nadzór nad zużyciem zasobów i pracą całego klastra obliczeniowego. W związku z dużą szczegółowością odnotowywanych danych, możemy zbadać wiele aspektów działania klastra HPC takich jak: zmiana zapotrzebowania w czasie na pamięć RAM czy ilość CPU, obciążenie klastra w dni wolne od pracy, czas oczekiwania zadania od momentu utworzenia do uruchomienia, czy użytkownicy zużywają tyle zasobów ile deklarują lub godziny, w których pojawiała się największa aktywność użytkowników. Uwaga: daty odnotowywane przez system kolejkowy są zapisane w formacie czasu uniksowego (POSIX), czyli liczby sekund mierzonych od początku roku 1970 UTC co oznacza, że data opisana np. 1422357794, to GMT: Tuesday, January 27, 2015 11:23:14 AM. Udostępniona tabela zawiera następujące kolumny: id: indeks wpisu w bazie danych ctime: Creation time - kiedy zadanie zostało utworzone w systemie kolejkowym etime: Eligible time - kiedy zadanie zostało zakwalifikowane jako zdatne do rozpoczęcia obliczeń start: Kiedy zadanie się rozpoczęło end_time: Kiedy zadanie się zakończyło rm_mem: Resources List Memory - jakie użytkownik zadeklarował zapotrzebowanie na pamięć operacyjną RAM rl_ncpus: Ncpus - ile użytkownik zadeklarował zapotrzebowania na procesory do wykonania obliczeń rl_cput: Resuorces List CPU Time - jaki czas użycia procesorów przypada na wszystkie procesy użytkownika na wszystkich węzłach obliczeniowych rl_walltime: Resources List Walltime - jaki czas wykonywania zadania zadeklarował użytkownik rl_software: Resources List Software - jakie oprogramowanie użytkownik zadeklarował do użytku ru_mem: Resources Used Memory - ile zadanie użytkownika rzeczywiście zużyło pamięci RAM ru_ncpus: Resources Used Ncpus - ile procesorów zostało wykorzystanych do wykonania obliczeń ru_cput: Resources used CPU time - ile czasu procesorów wykorzystały wszystkie procesy zadania użytkownika na wszystkich węzłach obliczeniowych na jakich wykonywano obliczenia ru_walltime: Resources Used Walltime - czas w jakim wykonało się zadanie exit_status: Jakim stanem zakończyło się zadanie: Jeżeli X < 0 : zadanie nie zostało wykonane. Jeżeli 0 <=X < 128 : kod błędu powłoki wyjaśnia przyczynę błędu zadania Jeżeli X >= 128 : zadanie zostało zabite sygnałem. Sygnał liczy się wzorem: X – 128 = Y np. 137 – 128 = 9 sygnał KILL eligible_time: Eligible Wait Time for Jobs - czas jaki zadanie oczekiwało na uruchomienie np. z powodu braku wystarczających zasobów. (Polski) |
Słowa kluczowe | "Portable Batch System"@en, "klaster komputerowy"@pl, "system kolejkowy"@pl, "PBS"@pl, "klaster obliczeniowy"@pl, "Bem (superkomputer)"@pl |
Klasyfikacja |
Typ zasobu:
zbiór, baza danych Dyscyplina naukowa: Dziedzina nauk inżynieryjno-technicznych / informatyka techniczna i telekomunikacja (2018) Grupa docelowa: studenci, naukowcy Szkodliwe treści: Nie |
Charakterystyka |
Miejsce powstania: Wrocław
Czas powstania: 2019 Liczba rekordów danych: 8045477 Użyte oprogramowanie: PBS Język zasobu: Angielski, Polski |
Linki zewnętrzne | |
Licencja | CC BY-SA 4.0 |
Informacje techniczne |
Deponujący: Patryk Bełzak Data udostępnienia: 06-08-2019 |
Kolekcje | Kolekcja Politechniki Wrocławskiej, Kolekcja e-Science PWr |
Podobne zasoby
Otwarcie klastra BEM
wideo, Politechnika Wrocławska, dziedzina nauk technicznych / informatyka (2011)
Otwarcie klastra BEM - reportaż
wideo, Politechnika Wrocławska, dziedzina nauk technicznych / informatyka (2011)
Czynniki pozaekonomiczne funkcjonowania dystryktów przemysłowych
Jakub Ryśnik, praca dyplomowa, Politechnika Wrocławska, Dziedzina nauk inżynieryjno-technicznych (2018)
Klaster BEM - klip wideo
wideo, Politechnika Wrocławska, dziedzina nauk technicznych / informatyka (2011)