Rocks Cluster

Rocks Klaster jest projektem open source, które zapewnia użytkownikom dystrybucji systemu Linux w oparciu o system operacyjny CentOS i zaprojektowane od podstaw, aby zaoferować w pełni funkcjonalnego rozwiązania klastra na dysku CD dla klastrów Red Hat Linux.
Wcześniej znany jako NPACI Rocks Cluster Tool Kit, dystrybucji pozwala każdemu łatwo i szybko zbudował klaster Skały. Pozwala również doświadczeni użytkownicy klastrów obliczeniowych na budowę, kafelki, ściany wizualizacji wyświetlacz, a siatka endpoints.Based na CentOSBeing na podstawie rozkładu CentOS Linux, która z kolei opiera się na systemie operacyjnym Red Hat Enterprise Linux, dystrybucja Rocks Klaster zapewnia mocny, stabilny i niezawodny system dla przedsiębiorstw gotowe, który oferuje unikalną i prostą instalację.
Chodzi o wszystkie niezbędne narzędzia do zarządzania klastrami, jak PBS, wsparcie GM, Maui, zwoje i wiele innych. Będziesz w stanie wdrożyć, uaktualnić, skalę i zarządzania klastrami bez większego kłopotu. W chwili obecnej tylko 64-bitowy (x86_64) architektura supported.Getting rozpoczął Rocks klusteryny celu wybudowanym klastra obliczeniowego, użytkownicy muszą utworzyć klaster goły, uruchomić swój front-end z rolki Kernel / boot i dodać rolki bazowej, OS Dysk 1, rolki rolki dysku OS 2 i OS Disk Images 3 ISO. W celu uzyskania pełnych klastrów funkcjonalny, należy również dodać Area51, SG, mózgu, HPC, Python, Perl, i bułki web-server.
Z drugiej strony, ci z Was, którzy chcą zbudować klaster niestandardowe powinny wybrać z Rocks a la carte wybór Klastra i pobierz podstawa i jądra rolki / boot, jak również cały system operacyjny rolls.Bottom lineAll w ogóle, skały Klaster jest oparty na CentOS przedsiębiorstwa gotowe dystrybucji Linux używany przez setki naukowców na całym świecie, aby zainstalować własny klaster. Jest to unikalny system operacyjny zasilany przez mnóstwo technologii open source i zaprojektowane tak, aby łatwo wdrażać klastry zarządzaniu

Co nowego w tym wydaniu:.

< ul>

Co nowego w wersji 6.1.1:

• najnowsza aktualizacja Rocks Codename Sand Boa jest teraz zwolniony. Sand Boa jest 64-bitowy zwolnić tylko i jest oparty na CentOS 6.5 Rocks-Rolki systemowe zostały dostarczone wszystkie aktualizacje stosowanych od 14 kwietnia 2014 roku to również aktualizacje dla OpenSSL Heartbleed.
• Wsparcie dla ZFS został zaktualizowany do wersji 0.6.2. Condor jest teraz rolki HTCondor jest w wydaniu 8.0.6
• Również jest nową rolkę nazywa linii papilarnych, który dynamicznie określa zależności skompilowanego kodu na obu Skał i systemów innych niż Rocks.

Co nowego w wersji 5.4:

• Nowe funkcje:
• Redesign Instalatora Avalanche.
• Obserwując działanie Instalatora Avalanche na komputerze z 1000 węzłów, stało się oczywiste, że musimy zmniejszyć jak najwięcej ruchu na frontend, jak to możliwe. To doprowadziło do zastąpienia python BitTorrent instalatora opartej na z BitTorrent inspirowane instalatora kod napisany w C. C pozwala umieścić więcej plików w sieci peer-to-peer, w szczególności z: product.img (160KB), stage2. img (108MB) i updates.img (98MB).
• Aby jeszcze bardziej ograniczyć ruch na frontend, nakładka teraz wysyła prognozy pakietów zainstalowaniem węzłów. Kiedy węzeł prosi o pakiecie, tracker na frontend wysyła listę adresów węzłów, gdzie ten pakiet można znaleźć, a także listę najbliższych 9 pakietów że węzeł będzie najprawdopodobniej zwrócą obok. Gdy podobne urządzenia są jednocześnie instalacji, zmniejsza ruch tracker przez 10x.
• Instalacja węzły mogą być grupowane. Po zainstalowaniu węzła pyta trackera dla lokalizacji pakietu i jeśli inne węzły są jednocześnie instalacji, tracker będzie sprzyjać węzły, które są w tej samej grupie co węzła wnioskującego, czyli listę tracker wysyła z powrotem do węzła się instalacja będzie miał węzłów z tej samej grupy co węzła instalowanej na górę listy. Grupowanie jest domyślny szafie, ale to może być kontrolowane przez & quot; coop & quot; atrybutów. Na przykład, jeśli chcesz umieścić wszystkie węzły z regału 0 i stojak 1 w tej samej grupie (o nazwie & quot; red & quot;), należy wykonać: & quot; skały ustawić gospodarza atr rack0 rack1 coop red & quot;
.
• Można określić wiele trackerów i wielu serwerów & quot; & quot ;. pakietów Server pakiet jest węzłem, który jest cali do zagwarantowane cali do mieć żądany plik (np, nakładka).
• Dla każdego pobranego pliku, sprawdzanie sum kontrolnych MD5 jest wykonywana. To przypadek, gdy wykryje wzajemnej może uszkodzony plik i zapobiega rozprzestrzenianiu się uszkodzony plik w sieci peer-to-peer.
• klejenie Kanał dla węzłów jest teraz pod kontrolą linii poleceń Rocks.
• Konfiguracja klejenie Kanał dla węzła są przechowywane w bazie danych i mogą być dodawane, usuwane lub modyfikowane linii poleceń Skały (np & quot; skały dodać hosta związany ... & quot;). Po łączenie kanałów jest skonfigurowany do węzła, może zostać dynamicznie stosowane, wykonując cali do skał synchronizacji sieci gospodarza ... & rdquo;.
• reguły zapory wszystkie węzły "są kontrolowane przez linię poleceń Rocks.
• Zasady dla wszystkich węzłów są przechowywane w bazie danych i mogą być dodawane, usuwane lub modyfikowane linii poleceń Skały (np, & quot; skały otwarta zapora hosta & quot ;, & quot; skały w pobliżu zapory hosta & quot ;, & quot; skały usunięcia gospodarzem firewall & quot;). Po ustawienia zapory węzła są zmieniane, mogą być stosowane do węzła, w locie z & quot; skały synchronizacji zapory hosta 'hostname' & quot; (To polecenie nazywa się również wtedy, gdy użytkownik wykonuje & quot; skały synchronizacji sieci hosta ... & quot;).
• Wprowadzenie & quot; & quot Air Traffic kontroli;.
• Opracowaliśmy usługę znaną jako & quot; Airboss & quot; który znajduje się na fizycznej nakładka (w DOM0) i pozwala użytkownikom innym niż root, aby kontrolować ich maszyn wirtualnych. Motywacja dla tej usługi jest to, że libvirt (API wirtualizacji napisany przez RedHat, że może kontrolować kilka różnych wdrożeń wirtualizacji) zakłada, & quot; korzeń & quot; Dostęp do sterowania i monitorowania maszyn wirtualnych.
• Airboss w Rocks to mały serwis, który wykorzystuje wiadomości podpisane cyfrowo, aby dać użytkownikom innym niż root dostęp do swoich wirtualnych klastra (i tylko ich wirtualnej klastra). Airboss opiera się na publicznych / prywatnych par kluczy do sprawdzania wiadomości. Administrator fizycznej klastra hostingowej musi wydać jednego polecenia skojarzyć klucz publiczny z danego wirtualnego klastra. W tym momencie, pełny proces włączenia, wyłączania i instalacji wirtualnego klastra może być kontrolowany przez upoważnioną) (użytkownika bez uprawnień administratora.
• Oprócz kontroli zasilania VM Dodaliśmy również możliwość dołączania do konsoli VM jest. To pozwala użytkownikom zobaczyć całą sekwencję startową dla VM zaczynając od & quot; BIOS & quot; komunikaty startowe.

Polecenia
• Kilka Skały zostały dodane do obsługi tej funkcji: & quot; skał utworzyć klucze & quot; (Do tworzenia publicznych / prywatnych par kluczy), & quot; skały ustawić moc hosta & quot; (Do zasilania / dół maszyn wirtualnych i przymusowo zainstalować VM, podobny do PXE fizyczną maszynę), a & quot; skały otwartą konsolę hosta & quot; (Dołączyć do konsoli VM jest).
• & quot; greceptor & quot; zastąpione & quot; channeld & rdquo;.
• Protokół zwojów drutu wiadomości zmienił co wymagało generalnego remontu do greceptor. Podjęliśmy decyzję, aby napisać prostą obsługę na podstawie RPC (o nazwie "channeld") do przejęcia obowiązków greceptor. Channeld akceptuje żądania 411-put i działa na nich za pomocą 411-dostać się do pobierania plików pod kontrolą 411.
• Wszystkie inne składniki 411 pozostaje bez zmian, tylko silnik Powiadomienie zostało rozszerzone.
• Rozdzielczość DNS dla wielu domen.
• System nazewnictwa DNS na frontend obsługuje teraz kilka stref, w których każda podsieć zarządzany przez frontend mogą być wprowadzane do innej strefy. Usługa DNS może być włączone lub wyłączone dla każdego obszaru.
• Wsparcie Zaloguj urządzenia.
• węzeł może być skonfigurowany jako urządzenie logowania. Domyślnie, urządzenie może przekazywać zadania Logowanie, ale nie może wykonywać pracy.
• Ustaw nazwę hosta na podstawie nazwy konkretnego interfejsu sieciowego.
• & quot; primary_net & quot; atrybut pozwala węzły mieć / bin / hostname zestaw do nazwy interfejsu sieciowego innego niż & quot; & quot ;. prywatne Jest to przydatne do logowania lub innych urządzeń wielu interfejsów.
• Łatwo zamienić dwa interfejsy z polecenia jeden Rocks.
• Aby przełączać ustawienia dwóch interfejsów, wykonanie & quot; interfejs hosta skały wymiany ... & quot;.
• Utworzono repozytorium GIT dla związane Rocks-kodu źródłowego.
• Host & quot; git.rocksclusters.org & quot; jest repozytorium GIT dla wszystkich kodu podstawowe skały, kodu i zasobów Triton UCSD Rocks kod contrib.
• Wtyczki:
• System operacyjny: Na podstawie CentOS zwolnić 5 / Aktualizacja 5 i wszystkie aktualizacje na dzień 02 listopada 2010
.
• Podstawa: Anaconda instalator zaktualizowana v11.1.2.209
.
• Podstawa: nie przekieruje sieci prywatnej do & quot; & quot ;, eth0 zamiast Rocks śledzi w sieci i węzła kickstarted z mapy, że sieć do & quot; private & quot; sieciowego. Na przykład, jeśli węzeł kickstarted off 'eth1 i quot ;, następnie cali do eth1 cali do będą odwzorowywane do sieci prywatnej.
• Podstawa: instalator Anaconda hartowane agresywniej napisać do plików konfiguracyjnych grub na dyskietkę startową. Przyczynia się to do zmniejszenia & quot; powiesić podczas próby załadowania Grub stage2 & quot; problem.
• Podstawa: usunięte ext4 moduł jądra od warunków instalacji. Okazało się, że próbuje zamontować partycję wymiany jako systemu plików ext4 często spowodowane podczas instalacji błędy jądra.
• Podstawa: dodany ksdevice = bootif do wszystkich celów PXE. Zwiększa to szybkość instalacji poprzez ponowne wykorzystanie / informacje interfejsu adres IP, gdy a buty węzeł PXE. Wcześniej, węzeł będzie ponowne skanowanie wszystkich interfejsów Ethernet.
• Podstawa: gdy plik węzeł XML ma błąd składni, & quot; profil lista skały hosta & quot; wypisze nazwę pliku XML i węzeł linii numer w którym wystąpił błąd składni.
• Podstawa: & quot; skały prowadzą szereg & quot; teraz ikra kilka równoległych wątków, gdy są dostarczane wiele hostów. Dodano również następujące parametry:. Limit czasu (! Dzięki Tim Carlson), opóźnienia, statystyki, zestawianie i liczba-wątki
• Podstawa: mniam domyślna konfiguracja zmodyfikowana wiązać się nakładka na publicznym IP, a nie prywatne. Umożliwia to łatwą instalację pakietu dla węzłów zewnętrznych (na przykład, węzłów działa na chmurze publicznej).
• Podstawa:. Nieistniejące atrybuty są uważane za fałszywe warunkowe podczas budowania plików konfiguracyjnych
• Podstawa: & quot; poprzedza & quot; Metoda dodany do Skały polecenia wtyczki, aby umożliwić precyzyjną kolejność wykonania wtyczki.
• Podstawa: interfejsy sieciowe pod Linuksem 2 nowe specyficzne tryby: & quot; dhcp & quot; i & quot; & quot ;. noreport & Quot; dhcp & quot; Tryb wskazuje, że interfejs powinien zawsze DHCP, aby uzyskać jego adres. & Quot; noreport & quot; Tryb określa, że ​​nie ma & quot; ifcfg - * & quot; Plik powinien być zapisany dla interfejsu. Jeśli tryb nie jest określona dla interfejsu, a następnie Rocks stworzy & quot; ifcfg - * & quot; plik interfejsu opartego na wartościach określonych w bazie danych (tak jak to miało miejsce w poprzedniej wersji).
• Podstawa: IPMI teraz używa kolumny kanału w tabeli interfejsu sieci, aby określić liczbę listwy kanałowy kontroler
.
• Podstawa: tekst wewnątrz & quot; changelog & quot; Tagi teraz zawinięte w CDATA, aby umożliwić znaków XML ucieczki. To jest obsługiwana tylko dla plików węzła XML znalezionych w Rolls (nie dla węzłów występujących pod plików XML / export / skały / install / site-profili.
• Podstawa: rolki mogą być budowane bez kompletną kopię kodu źródłowego Skały. Używają środowiska programistycznego Skały znalezione w / opt / skały / share / devel na frontend.
• Area51. Tripwire zaktualizowany do v2.4.2
• Bio:. Odświeżane moduły CPAN
• Bio:. Odświeżane CPAN MPI-Blast
• Bio:. Dodania sekwencji całego genomu Celera Assembler
• Condor. Zaktualizowany do v7.4.4
• Condor: Konfiguracja Condor całkowicie zautomatyzowany retooled: 1) konfiguracja jest Rocks polecenie oparte zamiast samodzielnym narzędziem CondorConf, 2) obsługuje aktualizację dynamiczną któregokolwiek / wszystkie konfiguracje na węzłach, 3) korzysta Rocks polecenia dodatkowe wtyczki, aby umożliwić automatyczne kondor config (np poprzez wtyczki, może włączyć wsparcie MPI).
• Condor. Wspiera hasło basen (shared secret) do dodatkowej weryfikacji gospodarza
• Condor. Integruje się z rolki EC2 rozszerzyć baseny Condor z gospodarzami EC2
• Condor: wsparcie dla portu wynosi dodaje celu ułatwienia konfiguracji firewalla
.
• Condor: lokalna kopia strony podręcznika Condor dodał toczyć dokumentów
.
• Condor. Wsparcie dla aktualizacji Condor na węzłach bez ponownej instalacji (np skały prowadzone gospodarza & quot; yum update kondor & quot;; skały synchronizacji condor Host)
• Ganglia:. Monitor-core zaktualizowany do v3.1.7
• Ganglia. Rrdtool zaktualizowany do v1.4.4
• Ganglia. Ganglia Rolka może być dodany na locie do istniejącego frontend
• Ganglia: wszystkie węzły wysłać swoją metrykę metadanych co 3 minuty. W przeszłości, kiedy gmond na wznowiono nakładka, nie może zebrać metryk z węzłów, ponieważ nie miał metadane z węzłów (i nie ma sposobu, aby zwrócić się do węzłów, ponieważ węzły są skonfigurowane w & quot; głuche & quot;. Tryb)
• HPC. Iozone zaktualizowana v3.347
• HPC. Iperf zaktualizowany do v2.0.5
• HPC. MPICH2 zaktualizowana v1.2.1p1
• HPC:. OpenMPI zaktualizowany do v1.4.3
• HPC: skały-openmpi jest domyślnym MPI i jest skonfigurowany z MPI-selektora
.
• SG:. SGE zaktualizowana V62u5
• SG: dowolny host może być skonfigurowany jako hosta wykonania przez ustawienie quot gospodarza &; exec_host & quot; i & quot; SG & quot; przypisuje prawda i każdy host może stać się gospodarzem złożenie przez ustawienie quot gospodarza &; submit_host & quot; i & quot; SG & quot; przypisuje prawda.
• Serwer sieci Web. MediaWiki zaktualizowana v1.16.0
• Serwer sieci Web. Wordpress zaktualizowany do v3.0.1
• Xen: każdy węzeł może how maszyn wirtualnych Xen hosta. To jest sterowany z & quot; xen & quot; atrybut.
• Xen: ustawić moc dla wszystkich węzłów w klastrze wirtualnym (z wyjątkiem nakładka VM) z jednego polecenia (& quot; skały ustawić moc klastra ... & quot;). Ustawienia zasilania może być & quot; & quot ;, na & quot; off ' lub & quot; zainstalować & quot; (Włączanie i zmusić instalacji).
• Xen: pozwala zdefiniować maszyn wirtualnych VLAN oznaczone interfejsy. Wcześniej VLAN tagging był wspierany tylko dla interfejsów fizycznych.
• Poprawione błędy:
• Podstawa: użytkownicy inni niż administrator nie może już zobaczyć zaszyfrowane hasła z listy skały gospodarza "attr". Zakodowane hasła są teraz przechowywane w kolumnie "cienia" w tabelach atrybutów.
• Podstawa: & quot;% & quot; w & quot; skały uruchomić hosta% & quot; teraz zwraca wszystkie hosty. Dzięki Tom Rockwell do poprawki.
• Podstawa: Jeśli przełącznik Ethernet wysyła żądanie DHCP, serwer DHCP nie wysyła go na & quot; pliku & quot; i & quot; następny serwer & quot; w odpowiedzi DHCP. To spowodowało pewne przełączniki nie prawidłowo załadować swój firmware. Bardziej ogólnie, jest to kontrolowane przez cali do kickstartable & quot ;, cali do dhcp_filename cali do i & quot; dhcp_nextserver & quot; atrybuty.
• Podstawa: & quot; skały Ustaw hasło & quot; prosi użytkownika o potwierdzenie ich nowe hasło.
• Podstawa: gdy węzeł żąda plik kickstart i jeśli uzna, że ​​nakładka jest zbyt frontend & quot; & quot ;, zajęty węzeł kickstarting teraz właściwie nie losowy odczekiwanie przed ponownym wnioskiem swój plik kickstart. Przed przystąpieniem do tej poprawki, węzeł będzie odczekania 30 sekund.
• Podstawa:. Warunkowe może być wiele teraz obecne w znaczników XML
• Podstawa: naprawiono problem wykres przejścia. W przeszłości, jeśli miał wykres & quot; & quot; (Dyr) & quot; B & quot; do & quot; c & quot; a jeśli & quot; dyr & quot; było fałszywe, przechodzenie wykres obejmowałyby & quot; & quot; i & quot; c & quot ;. Teraz po prostu obejmuje & quot; & quot;.
• Podstawa: uprawnienia określone w & quot; pliku & quot; tag są zachowane, nawet jeśli istnieją inne & quot; pliku & quot; Tagi dla tego samego pliku, który nie ustawić uprawnienia pliku. Bug kiedy później & quot; pliku & quot; tag bez Quot &; perms & quot; atrybut napotkano, prawa pliku zostały usunięte.
• Podstawa: & quot; pliku & quot; tagi obsługują teraz & quot; os & quot; warunkowe.
• Podstawa: w insert-etery, urządzeń oznaczonych & quot; nie kickstartable & quot; Nie będziesz musiał czekać na pliku kickstart. W przeszłości trzeba było trafić na & quot; F9 & quot; (Siła zamknąć) aby wyjść insert-etery, gdy odkrywa urządzeń kickstartable Non (na przykład przełączniki Ethernet).
• Podstawa: konfiguracja IPMI czyszczone. Skały nie generuje błędne wpisy w modprobe.conf lub / etc / sysconfig / ifcfg-IPMI.
• Podstawa: & quot; pre & quot; tag obsługuje teraz & quot; tłumacza = & quot; atrybut.
• Bio: wyeliminowany & quot; Permission Denied & quot; Błędy podczas wielokrotnych przejazdów na tej samej bazie danych BLAST przez różnych użytkowników.
• SG: metryka kolekcja wykonana praca bardziej efektywna. Wcześniej, gdy 100 z zadań są przekazywane do kolejki nakładka na metryka SG będzie tak długo, aby wykonać to spowodowane gmond zatrzymać gromadzenie metryk dla wszystkich hostów.
• SG: liczba miejsc pracy CPU zużywają tablic teraz poprawnie liczone są
.