cs:navody:historie:start

Infrastruktura úložišť

Úložiště využívají distribuovaného a hierarchického modelu. Distribuovaný model je reprezentován geograficky oddělenými datovými centry, umístěnými v Plzni, Jihlavě a Ostravě. Tento model přináší výhodu výrazně vyšší odolnosti proti ztrátě dat způsobené poškozením médií, přírodní katastrofou nebo chybou uživatele či administrátora. Další výhoda může spočívat v možnosti využít nejbližšího úložiště, se kterým lze komunikovat rychleji.

Hierarchický model (typu HSM – Hierarchical Storage Management) spočívá v tom, že méně často používaná data jsou odsouvána na levnější média s vyšší kapacitou, pásky. Tímto je umožněno s danými náklady dosáhnout výrazně vyšší kapacity oproti čistě diskovému úložišti. Naproti tomu často používaná data budou uložena na velmi rychlých médiích (cache, rychlé disky), a tak budou k dispozici uživateli ve velmi krátkém čase.

Datová centra


DU4 Ostrava

HSM uložiště v Ostravě je dvouvrstvé. Tier 1 je soubor diskových polí složených celkem ze 755ks 10TB SAS disků. Tier 2 je tvořen páskovou jednotkou TS4500 se 12mechanikami obsluhovaných dvojicí robotů. Osazenost 1167 pásek o kapacitě 10TB. Disková kapacita HSM je zpřístupněna pomocí souborového systému GPFS, který zahrnuje jak Tier-1 tak diskovou část Tier-2 jako další pool.


DU5 Jihlava


CL1 Jihlava



Infrastruktura úložišť - stav ke konci roku 2018

Datová centra


DU1 Plzeň

Datové centrum v Plzni využívá třívrstvého modelu, kde nejvyšší vrstvu reprezentují rychlé FC (Fiber Channel) disky, druhá vrstva je složena ze SATA disků a nejnižší vrstva obsahuje páskovou knihovnu. Disponuje 500 TiB diskového prostoru, 3584 TiB na vypínatelných discích a 4,8 PiB na páskách (rozšiřitelné na 5,5 PiB jen nákupem páskových médií).

Na migraci mezi jednotlivými vrstvami (tiery) se zde používá technologie DMF (Data Migration Facility) od firmy SGI a jako pásková knihovna je použita Spectra Logic T-Finity.

Fotky data centra


DU2 Jihlava

Tier 1 je tvořen dvěma samostatnými diskovými poli DCS3700 s celkovým počtem 342 ks 3TiB SAS disků. Disky jsou rozděleny do 32x (8+2) + 2x (6+2) RAID6 skupin. Šest disků je konfigurováno jako spare disky. Celková čistá kapacita pole Tier1 je 804 TiB. Prostory Tier 2 jsou tvořeny jednak 7 ks MAID pole Promise Vess R2600fiD a dále páskovou knihovnou IBM TS3500. V MAID polích je instalováno celkem 734 ks 4TiB disků. Tyto disky jsou rozděleny 41 skupin RAID6 (16+2). V každém diskovém poli jsou 4 disky použity jako spare. Celkem je tedy k dispozici 648 datových disků o čisté kapacitě 2 496 TiB. Pásková knihovna TS3500 má 3 744 TiB využitelné kapacity.

Fotky data centra


DU3 Brno

Tier 1 obsahuje dvě disková pole DCS3700 s kapacitou 498 TiB. Tier 2 je tvořen jednak třemi kusy MAID polí Proware EP-4643S, tak páskovou knihovnou IBM TS3500. Využitelná kapacita diskových polí MAID je 2116 TiB, respektive 3520 TiB v případě páskové knihovny.

Fotky data centra

Rozdíly mezi jednotlivými data centry

Rozdíly mezi jednotlivými data centry nejsou dramatické a zpravidla se volí to, které je geograficky blíže. Nicméně některé rozdíly sepsané níže mohou ovlivnit volbu nejlepšího úložiště.

Jakmile si zvolíte data centrum, musíte používat správné adresy pro připojení k jednotlivým protokolům.

DU1 Plzeň

  • Plzeň jako jediná ze všech tří data center poskytuje migrační politiku cache_tape. Zde primární data jsou na rychlých Fibre Channel discích, jedna kopie na páskách a SATA discích. Pokud dojde místo na SATA oblasti, vytvoří se druhá kopie na páskách, tj. celkem dvě různé pásky (vhodné pro rychlejší přístup ke standardním datům).
  • Plzeňské data centrum má z důvodu použité architektury problém s pomalejším ukládáním většího počtu menších souborů - tím jsou kupříkladu myšleny soubory v rádu miliónů, menší než 1 MB.
  • Jsou zde zakládány všechny účty VO Storage.

DU2 Jihlava a DU3 Brno

  • Jihlava a Brno mají jinou architekturu než Plzeň, a tak neduhem spojeným s pomalejším nahráváním většího počtu menších souborů netrpí.
Pokud po přečtení informací výše stále váháte, které data centrum použít, můžete použít skript pro vybrání nejvhodnějšího úložiště. Ten se rozhoduje na základě latence a vybere to úložiště, které ji má směrem od Vás nejmenší.

du1 Plzen :

pasky → 2600, z toho 2400 v DMF → 2400*1.5TB = 3600TB COPAN → 8 shelfu * 26 raid group * 3 disky (3+1 raid5) * 4TB = 2496TB diskove pole IS4600-1 → 212TB diskove pole IS4600-2 → 205TB

celkem = 6513TB

du2 Jihlava :

DCS_HORNI → 357TB DCS_DOLNI → 357TB MAIDy → 6 * 407TB + 1 * 309 TB = 2751TB pasky → 3744TB (935 pasek)

celkem = 7209TB

du3 Brno :

pole → 400TB maidy → 1800TB pasky → 3520TB

celkem = 5720TB

du4 Ostrava

Kapacita Tier-1 → 5 836 TB

Kapacita Tier-2 → 17 505 TB

SSD → ?

celkem = 23.341PB

du5 Jihlava

Celkem tedy 9360 TB v NL discích a 144 TB v SSD discích

CL1 Jihlava

13 x storage server každý 48ks HDD s kapasitou 12TB - celkem 7.488PB 4 x storage server každý 48ks HDD s kapasitou 16TB - celkem 3.072PB

cl1 celkem = 10.560PB

CL2 Jihlava

33 x storage server každý 48ks HDD s kapasitou 16TB - celkem 25.433PB

Poslední úprava: 15.11.2019 12:58