Lustre: Różnice pomiędzy wersjami
Przejdź do nawigacji
Przejdź do wyszukiwania
| (Nie pokazano 2 wersji utworzonych przez 2 użytkowników) | |||
| Linia 4: | Linia 4: | ||
Współdzielony system plików Lustre składa się z: | Współdzielony system plików Lustre składa się z: | ||
| − | + | * dwie macierze dyskowe DDN SFA14KX-40, | |
| − | * dwie macierze dyskowe DDN | + | * 2 serwery MDS i 8 serwerów OSS, |
| − | * | + | * przesyłanie danych przez sieć [[Infiniband]] - podłączenie macierzy, serwerów MDS i OSS w pełni redundantne (bez pojedyńczych punktów awarii), |
| − | + | * pojemność surowa: 1500 TB, | |
| − | * przesyłanie danych przez sieć [[Infiniband]] | ||
| − | * pojemność surowa: | ||
* parametry wydajnościowe (blok 1MB): | * parametry wydajnościowe (blok 1MB): | ||
| − | ** zapis liniowy z dowolnego węzła klastra [[ | + | ** zapis liniowy z dowolnego węzła klastra [[Bem]]: 5 GB/s |
| − | ** łączny odczyt liniowy: | + | ** łączny odczyt liniowy: 75 GB/s, |
| − | ** łączny zapis liniowy: | + | ** łączny zapis liniowy: 75 GB/s. |
| − | |||
| − | |||
===Zalecenia dla użytkowników=== | ===Zalecenia dla użytkowników=== | ||
| − | * nie | + | * Zawartość dysku /lustre nie jest w żaden sposób zabezpieczana przez WCSS i może zostać w każdej chwili skasowana lub utracona bez ostrzeżenia. Użytkownicy powinni zabezpieczać ważne wyniki we własnym zakresie. |
| − | * | + | * Nie wolno tworzyć wielu małych plików - system Lustre jest zoptymalizowany do przetwarzania dużych plików. |
| − | + | * Każde zadanie obliczeniowe automatycznie tworzy podkatalog na dysku /lustre a jego ścieżka jest przechowywania w zmiennej $TMPDIR. Zachęcamy użytkowników do umieszczania tam danych tymczasowych generowanych podczas obliczeń. Katalog ten jest automatycznie kasowany po zakończeniu zadania. | |
| − | + | * Brak limitów (kwot) dyskowych (na razie ;). | |
| − | + | * Pliki nie używane dłużej niż 1 miesiąc będą automatycznie kasowane. | |
=== Interesujące strony === | === Interesujące strony === | ||
| Linia 29: | Linia 25: | ||
* Opis systemu plików Lustre: http://pl.wikipedia.org/wiki/Lustre_(system_plików) | * Opis systemu plików Lustre: http://pl.wikipedia.org/wiki/Lustre_(system_plików) | ||
* Lustre: http://www.lustre.org/ | * Lustre: http://www.lustre.org/ | ||
| − | |||
* Macierze DDN: http://www.datadirectnet.com/ | * Macierze DDN: http://www.datadirectnet.com/ | ||
* Infrastruktura [[Infiniband]]: http://www.voltaire.com | * Infrastruktura [[Infiniband]]: http://www.voltaire.com | ||
[[Kategoria:Storage]] | [[Kategoria:Storage]] | ||
Aktualna wersja na dzień 12:39, 16 lis 2016
Lustre w WCSS
Współdzielony system plików Lustre składa się z:
- dwie macierze dyskowe DDN SFA14KX-40,
- 2 serwery MDS i 8 serwerów OSS,
- przesyłanie danych przez sieć Infiniband - podłączenie macierzy, serwerów MDS i OSS w pełni redundantne (bez pojedyńczych punktów awarii),
- pojemność surowa: 1500 TB,
- parametry wydajnościowe (blok 1MB):
- zapis liniowy z dowolnego węzła klastra Bem: 5 GB/s
- łączny odczyt liniowy: 75 GB/s,
- łączny zapis liniowy: 75 GB/s.
Zalecenia dla użytkowników
- Zawartość dysku /lustre nie jest w żaden sposób zabezpieczana przez WCSS i może zostać w każdej chwili skasowana lub utracona bez ostrzeżenia. Użytkownicy powinni zabezpieczać ważne wyniki we własnym zakresie.
- Nie wolno tworzyć wielu małych plików - system Lustre jest zoptymalizowany do przetwarzania dużych plików.
- Każde zadanie obliczeniowe automatycznie tworzy podkatalog na dysku /lustre a jego ścieżka jest przechowywania w zmiennej $TMPDIR. Zachęcamy użytkowników do umieszczania tam danych tymczasowych generowanych podczas obliczeń. Katalog ten jest automatycznie kasowany po zakończeniu zadania.
- Brak limitów (kwot) dyskowych (na razie ;).
- Pliki nie używane dłużej niż 1 miesiąc będą automatycznie kasowane.
Interesujące strony
- Opis systemu plików Lustre: http://pl.wikipedia.org/wiki/Lustre_(system_plików)
- Lustre: http://www.lustre.org/
- Macierze DDN: http://www.datadirectnet.com/
- Infrastruktura Infiniband: http://www.voltaire.com