gentlObservatory
Czech public procurementRead only

Research / Source documents

Documents

Read extracted documents and trace facts to their original files.

Reset

56,228 documents

Newest collected first
DocumentProcessingExtracted textLast checkedNext check
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
zadávací dokumentaceapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
zadávací dokumentaceapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
zadávací dokumentaceapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
zadávací dokumentaceapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
zadávací dokumentaceapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
zadávací dokumentaceapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
jiný dokumentapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
zadávací dokumentaceapi.tenderarena.czQueuedNot yet available—18 Nov 2026, 01:04
Archive

zadávací dokumentace

Text available

Original at publisher ↗

Extracted evidence

3 extracted facts
QualificationMentioned only

Technical references

§ 74 ZZVZ, 2. ekonomické kvalifikace podle § 77 ZZVZ, 3. technické kvalifikace podle § 79 ZZVZ. Kritéria technické kvalifikace budou stanovena jako seznam významných dodávek předložený dodavatelem. Vymezení významné dodávky bude odpovídat předmětu navazující veřejné zakázky. 1…
QualificationMentioned only

Basic eligibility

zadavatel požadovat předložení dokladů o splnění kvalifikace. Tj. o splnění: 1. základní způsobilosti podle § 74 ZZVZ, 2. ekonomické kvalifikace podle § 77 ZZVZ, 3. technické kvalifikace podle § 79 ZZVZ. Kritéria technické kvalifikace budou stanovena jako seznam významných dod…
QualificationMentioned only

Professional qualification

zadavatel požadovat předložení dokladů o splnění kvalifikace. Tj. o splnění: 1. základní způsobilosti podle § 74 ZZVZ, 2. ekonomické kvalifikace podle § 77 ZZVZ, 3. technické kvalifikace podle § 79 ZZVZ. Kritéria technické kvalifikace budou stanovena jako seznam významných dod…
Extracted text 60,652 characters
<!-- PAGE 1 -->ZIP Archive (7 files, 1222556 bytes)

Files: - 06_PTK/ (0 bytes) - 06_PTK/Doplnujici_dotazy_PTK.docx (157972 bytes) - 06_PTK/Okruhy_pro_diskizi_PTK.docx (18455 bytes) - 06_PTK/pokracovani_PTK_HPCQC_AI.pdf (455776 bytes) - 06_PTK/vyzva/ (0 bytes) - 06_PTK/vyzva/01_zakladni_pozadavky_zadavatele_VCIII_CLARA.docx (166358 bytes) - 06_PTK/vyzva/vyzva_PTK_VCIII_CLARA.pdf (423995 bytes)


06_PTK/pokracovani_PTK_HPCQC_AI.pdf
<!-- PAGE 1 -->**Nadlimitní veřejná zakázka na dodávky HPCQC – AI výpočetní cluster Zadavatel: Vysoká škola báňská – Technická univerzita Ostrava**

se sídlem Ostrava – Poruba, 17. listopadu 2172/15, PSČ: 708 00, IČ: 61989100, zastoupena prof. RNDr. Václavem Snášelem, CSc., rektorem, profil zadavatele: https://zakazky.vsb.cz/

Kontaktní osoba: Ing. Jan Juřena, tel.: + 420 597 329 579, email: jan.jurena@vsb.cz

# POKRAČOVÁNÍ PŘEDBĚŽNÉ TRŽNÍ KONZULTACE

ve smyslu § 33 zákona č. 134/2016 Sb., o zadávání veřejných zakázek, ve znění pozdějších předpisů (dále jen „ **ZZVZ** ")

<!-- PAGE 2 -->1. ## 1\. Dosavadní průběh předběžné tržní konzultace

Zadavatel v souladu s § 33 ZZVZ zahájil 22. 5. 2025 zveřejněním výzvy k účasti předběžnou tržní konzultaci (dále jen „PTK") v rámci dvou navazujících zadávacích řízení „Výpočetní cluster VCIII – IT4I" a „HPCQC – AI výpočetní cluster". 8. 9. 2025 ukončil zadavatel část PTK vztahující se k veřejné zakázce „Výpočetní cluster VCIII – IT4I" a zahájil související zadávací řízení, které aktuálně směřuje k uzavření smlouvy s vybraným dodavatelem. Poznatky z průběhu tohoto zadávacího řízení (zejm. dotazy účastníků a obsah nabídek) byly, a v současné době stále jsou, postupně implementovány do technického zadání veřejné zakázky na pořízení HPCQC – AI výpočetního clusteru. Zadavatel je s ohledem na aktuální právní úpravu rovněž povinen zohlednit dopad novelizovaného zákona o kybernetické bezpečnosti. Z tohoto důvodu se zadavatel vrací k PTK k navazujícímu zadávacímu řízení „HPCQC – AI výpočetní cluster" s cílem dále konzultovat technické podmínky (zadání) a poskytnout a konzultovat další podmínky účasti v zadávacím řízení.

1. ## 2\. Dotazy zadavatele

S ohledem na vývoj na trhu a informace získané v průběhu zadávacího řízení „Výpočetní cluster VCIII – IT4I" vznáší zadavatel dotazy, které se týkají poskytnutých návrhů technického řešení pro HPCQC – AI výpočetní cluster, resp. k předmětu plnění navazujícího zadávacího řízení. Zadavatel plánuje lépe reflektovat výkon řešení pro AI specifické úlohy pomocí standardního benchmarku HPL, nicméně s využitím emulace FP64 pomocí nižší přesnosti, jako například použitím tzv. Ozakiho schématu. Předpokládaná definice takovéhoto vymezení by byla: *Pro realizaci měření není nutno použít referenční implementaci benchmarku LINPACK, lze použít optimalizovanou implementaci benchmarku. Použitá implementace benchmarku však musí zcela splňovat specifikaci benchmarku. Optimalizace překladu zdrojového kódu a optimalizace běhu benchmarku je možná za předpokladu, že negativně neovlivní správnost provedení benchmark – tj. zejména, že budou reálně provedeny výpočty v požadovaném rozsahu a přesnosti, a že budou správně určeny časy běhu a výsledky měření. Není povoleno použití verze benchmarku se smíšenou přesnosti (tzv. HPL-MxP). Výpočet v HPL musí mít tzv. „relativní přesnost stroje" (relative machine precision – EPS) menší než 10E-16 a tzv. „škálovaný residuál" (scaled residual) musí být menší nebo rovný 16.*

1. **Potvrďte, zda je výše uvedený přístup k měření HPL s případnou emulací FP64:**
2. technicky realizovatelný na vámi navrhovaném řešení,
3. a v souladu s požadavky na platnost benchmarku HPL (včetně kritérií EPS a scaled residual).
4. **Uveďte očekávaný výkon v FP64:**
5. na jednu GPU kartu,
6. pro celý systém, a to v obou variantách:
7. bez emulace FP64,
8. s emulací FP64. (Uveďte, zda jde o teoretický odhad, zkušenost z reálného měření, nebo extrapolaci.)
9. **Pro každou variantu řešení uveďte:**

| počet • | GPU, |  |
| --- | --- | --- |
| přesný • | typ/model | GPU, |
| včetně klíčových |  | parametrů: |

<!-- PAGE 3 -->- FP64 peak výkon,
- FP32 / TF32 / BF16 výkon,
- velikost a typ paměti,
- propustnost paměti.
- **Pokud navrhujete použití emulace FP64, uveďte:**
- jakou konkrétní metodu snížené přesnosti doporučujete,
- proč ji považujete za vhodnou pro HPL,
- jaký očekáváte dopad na: o výkon na jednu GPU, o výkon celého systému, o splnění podmínek EPS a scaled residual.
- **Finanční prostředky na HPCQC – AI výpočetní cluster jsou v původní výši. Zadavatel očekává zachování kapacity a výkonu úložiště SCRATCH dle původního zadání. Pokud došlo ke změnám cen oproti původní nabídce na začátku PTK, zejména u paměťových modulů (RAM), SSD/NVMe úložišť, a GPU, uveďte prosím:**
- velikost systému v počtu uzlů,
- celkový počet GPU,
- celkový výkon.
- **Dále prosím uveďte, zda očekáváte změny cen v následujících 12 měsících, a pokud ano, u kterých komponent a v jakém řádu (např. ±5 %, ±10 %, více).**

## 2.1 Odpověď na dotazy zadavatele

Zadavatel žádá účastníky PTK, aby do **9. 2. 2026** doručili svou odpověď na dotazy vznesené v bodě 2 tohoto dokumentu. Odpověď lze doručit prostřednictvím komunikačního kanálu profilu zadavatele https://zakazky.vsb.cz/contract_display_2061.html nebo prostřednictvím e-mailu na adresu superpocitac@it4i.cz. Uvedený termín může být prodloužen na základě písemné žádosti odeslané prostřednictvím komunikačního kanálu profilu zadavatele nebo na uvedenou e-mailovou adresu nebo.

**Zadavatel žádá všechny účastníky PTK, aby, pokud možno, dodrželi stanovený termín.**

1. ## 3\. Informace vztahující se k podmínkám účasti v zadávacím řízení

Zadavatel upozorňuje účastníky PTK, že v zadávací dokumentaci bude povinen zohlednit dopady zákona č. 264/2025 Sb., o kybernetické bezpečnosti (dále jen "ZKB"). Novela ZKB účinná od 1.11. 2025 výrazně rozšiřuje okruh povinných subjektů s předpokládaným dopadem i na VŠB-TUO coby provozovatele tzv. kritické infrastruktury. VŠB-TUO aktuálně čeká na výsledek řízení o registraci regulované služby vedeného Národním úřadem pro kybernetickou a informační bezpečnost (dále jen "NÚKIB"). Předpokladem je, že se VŠB-TUO stane tzv. poskytovatelem regulované služby v režimu vyšších povinností. VŠB-TUO bude následně mj. z pozice zadavatele povinna vyhodnotit možný dopad rizik a následně přiměřeně aplikovat doporučení NÚKIB. S ohledem na předběžnou analýzu rizik vyhotovenou ze strany IT4Innovations je nanejvýš pravděpodobné, že dojde z naší strany k zákazu dodávek technologií vybraných čínských výrobců při zadávání relevantních veřejných zakázek vč dodávky clusteru HPCQC-AI.

**Zadavatel žádá, abyste tuto informaci případně zohlednili a/nebo okomentovali v odpovědích na dotazy vznesené v bodě 2 tohoto dokumentu. Zejména ve vztahu k dotazu č. 6.**

<!-- PAGE 4 -->1. ## 4\. Další průběh PTK

Zadavatel již neplánuje organizaci dalšího kola PTK. V případě potřeby se na účastníky PTK obrátí individuálně pro vysvětlení doručených odpovědí na vznesené dotazy. Zadavatel předpokládá ukončení PTK v průběhu února 2026 a zahájení souvisejícího zadávacího řízení do konce Q1 2026.

_________________________ Ing. Jan Juřena ved. odd. VZ a právních služeb IT4Innovations


06_PTK/Doplnujici_dotazy_PTK.docx
<!-- PAGE 1 -->**1. Sada dotazů:**

V návaznosti na proběhnuvší jednání v PTK prosíme o zodpovězení dvou níže uvedených dotazů:

1. Uveďte prosím seznam DLC komponent ve Vámi navrhovaných variantách řešení, minimálně v granularitě celků typu: CPU, GPU, PSU, přepínače vysokorychlostní sítě, přepínače Ethernet sítě.
2. Jaký je Vámi očekávaný LINPACK výkon v FP64 na GPU kartách pro zvažované varianty nabízených řešení. Uveďte prosím v dané variantě počet a typ zvažovaných GPU pro uvedený odhad výkonu. 

**2. Sada dotazů**

Prosím o zodpovězení dalších doplňujících dotazů. Tentokrát se týkají podpůrné infrastruktury objektu. 

**Infrastruktura na datovém sále zadavatele má pevně dané provozní a technické parametry, které jsou limitujícím faktorem pro návrh systému dodavatele. Jakým způsobem bude dodavatel řešit tyto níže uvedené limitující parametry chlazení ve vazbě na počet přípojných bodů, průtočné množství a tlakovou ztrátu navrhovaného systému?** 

**Uvedené průtoky jsou minimálními hodnotami ve vazbě na celý chladicí okruh.**

**Pro ucelení informací upřednostňujeme dodání schématu připojení systému na chladicí okruhy zadavatele.** 

![Obsah obrázku text, dokument, snímek obrazovky, Písmo Obsah generovaný pomocí AI může být nesprávný.](media/image1.png)

**3. sada dotazů:**

Děkuji za zaslané informace a prosím o zodpovězení níže uvedeného dotazu, který má opět návaznost na podpůrnou infrastrukturu objektu. 

**Jaký odhadujete maximální příkon a odpovídající tepelný výkon navrhovaných systémů při aktuálních cenách IT technologií, námi daných finančních limitech a reálně dosažitelném počtu výpočetních nódů?**


06_PTK/vyzva/01_zakladni_pozadavky_zadavatele_VCIII_CLARA.docx
<!-- PAGE 1 --> **„Výpočetní cluster VC III“ a „HPCQC – AI výpočetní cluster“ Základní požadavky zadavatele na předmět veřejné zakázky Obsah**

**Základní požadavky zadavatele na předmět veřejné zakázky**&#9;1

1&#9;Úvod&#9;1

2&#9;Parametry zakázky&#9;1

3&#9;Záměr&#9;2

4&#9;Výpočetní cluster VC III&#9;2

4.1&#9;Komponenty&#9;3

4.2&#9;Řešení superpočítače&#9;4

4.3&#9;Požadavky&#9;5

5&#9;HPCQC – AI výpočetní cluster&#9;8

5.1&#9;Komponenty&#9;8

5.2&#9;Řešení superpočítače&#9;10

5.3&#9;Požadavky&#9;11

6&#9;Rozsah zakázky&#9;14

7&#9;Závazný obsah Návrhu&#9;14

8&#9;Požadavky na záruku a servisní služby&#9;16

9&#9;Infrastruktura zadavatele&#9;17

9.1&#9;Datové centrum&#9;17

9.2&#9;WAN síť&#9;18

9.3&#9;Storage síť&#9;18

## Úvod

Obsahem tohoto dokumentu jsou informace pro dvě připravované veřejné zakázky „**Výpočetní cluster VC III“ a** „**HPCQC – AI výpočetní cluster“,** předběžné požadavky na rozsah, požadované vlastnosti, parametry a funkcionality.

***Všechny požadavky a parametry uvedené v tomto dokumentu jsou předběžné.***

## Parametry zakázky

Předpokládaný termín realizace zakázky je rok 2026.

Předpokládaná hodnota navazujícího zadávacího řízení „**Výpočetní cluster VC III“** je 195 500 000 Kč bez DPH.

Předpokládaná hodnota navazujícího zadávacího řízení „**HPCQC – AI výpočetní cluster“** je 177 000 000 Kč bez DPH.

Zakázka „**Výpočetní cluster VC III“** je financována z prostředků operačního programu Jan Amos Komenský (OP JAK), projekt Modernizace e-INFRA CZ II (CZ.02.01.01/00/23_016/0008329) a vlastních prostředků.

Zakázka „**HPCQC – AI výpočetní cluster“** je financována z prostředků operačního programu Jan Amos Komenský (OP JAK), projekt Centrum pro umělou inteligenci a kvantové výpočty v systémovém výzkumu mozku (registrační číslo: CZ.02.01.01/00/23_029/0008437), akronym CLARA, a z vlastních zdrojů

Zadavatel předpokládá, že v rámci hodnocení stanoví pevnou cenu a bude hodnotit pouze kvalitu nabízeného plnění. V rámci kritérií kvality bude hodnocena zejména technická úroveň řešení s důrazem na hodnotu výpočetního výkonu.

## Záměr

Záměrem zadavatele je modernizace a posílení kapacit ICT infrastruktury Národního superpočítačového centra IT4Innovations.

V rámci modernizace a posílení kapacit ICT infrastruktury centra budou pořízeny, instalovány a zpřístupněny uživatelům centra superpočítače pro řešení nejnáročnějších vědeckých a inženýrských výpočetních úloh. Tyto nové superpočítače postupně nahradí stávající superpočítač Karolína a dále poslouží vědeckým cílům projektu CLARA.

V roce 2026 budou realizovány oba superpočítače, kde superpočítač VC III nahradí v tom čase již morálně zastaralý stávající superpočítač Karolína. Superpočítač VC III bude výkonem převyšovat stávající superpočítač Karolína a bude používat v době realizace nejmodernější technologie. Hlavním cílem je poskytnout moderní technologie uživatelům centra pro široké spektrum úloh, od tradičních HPC simulací až po nejmodernější úlohy z oblasti umělé inteligence (AI). **Realizace superpočítače VC III je předmětem této veřejné zakázky.**

Ve stejném roce dojde taktéž k instalaci nového superpočítače HPCQC – AI výpočetní cluster, který bude primárně sloužit potřebám projektu CLARA, který je zaměřen na výzkum neurodegenerativních onemocnění mozku. **Realizace HPCQC – AI výpočetní clusteru je předmětem této veřejné zakázky.**

Ačkoliv z technického hlediska mohou být výsledná řešení do jisté míry podobná, bude každý výpočetní systém pořizován na základě samostatného zadávacího řízení, jelikož se jedná o dva samostatné funkční celky.

Oba superpočítače budou využívány taktéž k simulacím kvantových počítačů jakožto doplnění a předstupeň kvantového počítače VLQ, konsorcia LUMI-Q, který je instalován a provozován v datovém centru IT4Innovations (tedy stejném jako předchozí i nově pořizované superpočítače).

Nově realizované superpočítače VC III a HPCQC – AI výpočetní cluster budou integrovány do infrastruktury superpočítačového centra IT4Innovations, budou instalovány na datovém sále zadavatele, budou integrovány do síťové infrastruktury zadavatele a budou zpřístupňovat centralizovaná úložiště zadavatele.

Pozn. V textu jsou uváděny rychlosti a kapacity za použití dekadických jednotek (násobky deseti), pokud není explicitně uvedena binární jednotka (např. KiB, MiB).

## Výpočetní cluster VC III

Pro superpočítač VC III jsou v současné době na straně zadavatele zajištěny prostředky financování z národních zdrojů (OP JAK) ve výši 195 500 000 Kč bez DPH. 

### Komponenty

Superpočítač je komplexní systém sestávající z výpočetních, úložných, síťových a dalších systémů a softwarového řešení určený pro provádění náročných výpočtů (HPC).

![A diagram of a project Description automatically generated](media/image1.png)

Obrázek 1 Orientační schéma řešení superpočítače VC III

**Výpočetní cluster** je tvořen **Výpočetními servery** propojenými **Výpočetní sítí** – vysokorychlostní sítí s nízkou latencí. Výpočetní cluster je určen pro provádění výpočetních úloh uživatelů. Výpočetní servery poskytují výpočetní výkon, Výpočetní síť umožňuje rychlou komunikaci mezi servery a efektivní provádění paralelních úloh. Pro servery clusteru je dále používáno též označení uzel.

**Přístupové servery** *–* servery sloužící pro přístup uživatelů, pro přípravu úloh a dat, kompilaci a ladění kódů, pro zpracování výsledků a pro přenos dat.

**Úložiště** slouží k ukládání a sdílení dat. Úložiště jsou realizována jako komplexní řešení úložných zařízení, I/O serverů (např. souborových serverů), datových sítí a potřebného softwarového vybavení na straně serverů i klientů. Úložiště poskytující souborové služby jsou označována jako **Souborová úložiště**.

IT4Innovations strukturuje uživatelská úložiště výpočetních clusterů takto:

- úložiště HOME – souborové úložiště pro uživatelská nastavení operačního systému a aplikací na superpočítači
- úložiště SCRATCH – souborové úložiště pro krátkodobá data uživatelů, intenzivně používaná výpočetními uzly superpočítače
- úložiště PROJECT – souborové úložiště pro střednědobá a dlouhodobá projektová data uživatelů, sdílená mezi superpočítači IT4Innovations (existující úložiště zadavatele, není součástí zakázky)

**Úložiště** infrastruktury je určeno pro ukládání a sdílení dat infrastruktury superpočítače, tj. pro uložení systémových obrazů (image) serverů, logů, dat infrastrukturních služeb, uživatelského aplikačního vybavení, plánovače atd.

**Infrastrukturní a management servery** jsou určené pro správu superpočítače, zdrojů, úloh, licencí a poskytování infrastrukturních služeb (např. DHCP, DNS, LDAP, licenční servery, plánovače, monitoring, logování atd.), zdrojů.

Řešení **Zálohování** zajišťuje ochranu dat před úplnou ztrátou v případě vážného selhání primárního úložiště dat, chyby apod.

Superpočítač obsahuje **Síťovou infrastrukturu,** tj. síťové propojení komponent, systémů tak, aby bylo dosaženo požadované funkcionality, byl zajištěn přístup na jednotlivé služby, byl zajištěn výkon, dostupnost a bezpečnost.

Síťovou infrastrukturu tvoří zejména Výpočetní síť, LAN síť, integrace do WAN sítě zadavatele, integrace do storage sítě zadavatele a případně další sítě (například datové sítě SAN) dle návrhu dodavatele*.*

**Výpočetní síť** propojuje výpočetní servery, přístupové servery, je použita pro zpřístupnění některých úložišť.

**LAN síť** zajišťuje komunikaci mezi zařízeními uvnitř superpočítače, slouží ke správě systému, poskytování infrastrukturních služeb atp.

**Integrace do WAN sítě** zadavatele zajišťuje propojení do WAN sítě zadavatele a zprostředkovaně služby internetu v superpočítači.

**Integrace do storage sítě** zadavatele zajišťuje propojení do storage sítě zadavatele, kde jsou připojena centralizovaná úložiště zadavatele (např. úložiště PROJECT), tak aby byla zajištěna dostupnost úložišť na uzlech superpočítače. Integrace je obvykle realizována síťovými branami realizujícími propojení storage sítě zadavatele (100 Gb/s Ethernet) a výpočetní sítě clusteru.

**Infrastrukturu pro provoz v datovém centru** tvoří. zejména racky potřebné pro umístění zařízení, řešení chlazení zařízení superpočítače, napájení, rozhraní a napojení na infrastrukturu datového centra.

**Softwarové vybavení** je nezbytnou součástí řešení superpočítače. Softwarové vybavení zahrnuje mj. operační systémy všech serverů, firmware a ovladače hardware, knihovny, infrastrukturní software, software pro realizaci výpočetního prostředí superpočítače a výpočetní aplikace.

### Řešení superpočítače

Řešení superpočítače musí umožňovat efektivní provádění mnoha současných výpočetních úloh všech fází životního cyklu úloh (příprava, výpočet, zpracování výsledků) různého typu (paralelní, sériové; dávkové, interaktivní) mnoha uživatelů, bude zajišťovat bezpečné uložení dat uživatelů a rychlý přístup k datům, efektivní správu systému, komponent, zdrojů a uživatelů.

Řešení musí poskytovat transparentní, jednotné, sdílené uživatelské prostředí a jednotný přístup k výpočetním zdrojům.

Redundance řešení musí být v takovém rozsahu, aby při selhání fyzické komponenty nedošlo k významnému omezení poskytování služeb (aby neselhala klíčová služba nutná pro běh řešení) nebo aby nedošlo ke ztrátě důležitých dat. Zabezpečení významných dat bude dále zajištěno zálohováním.

Všechny servery řešení budou umožňovat vzdálenou správu nezávislou na běhu operačního systému.

Řešení musí umožňovat efektivní provoz a nízké provozní náklady.

Superpočítač VC III bude obsahovat tyto komponenty:

- **Výpočetní servery** 
- **Výpočetní síť**
- **Přístupové servery**
- **Úložiště HOME**
- **Úložiště SCRATCH**
- **Úložiště infrastruktury**
- **Infrastrukturní a management servery**
- **Zálohování**
- **Síťová infrastruktura**
  - **LAN síť**
  - **Integrace do WAN sítě** 
  - **Integraci do storage sítě**
- **Infrastruktura pro provoz v datovém centru**
- **Softwarové vybavení**

### Požadavky

#### Výpočetní servery

- minimálně 110 výpočetních serverů
- architektura x86_64, nebo ARM
- OS Linux
- jeden nebo dva procesory na výpočetní server
- minimálně 960 GB standardní paměti DDR RAM na výpočetní server
- min. 450 GB/s propustnost do paměti CPU/socket
- min. čtyři GPU akcelerátory
- výkon min. 4000 TFlop/s na server v FP32 (tensorflow/sparsity AI maximální teoretický výkon)
- minimálně 2 NIC pro vysokorychlostní síť s agregovanou šířkou pásma min. 800 Gb/s
- chlazení pomocí DLC, celkově min. 90% tepla do vody o vstupní teplotě min. 38 °C

#### Přístupové servery

- 2 přístupové (login) servery
- CPU, GPU a paměť serveru – shodná konfigurace jako u výpočetních serverů

#### Úložiště SCRATCH

Úložiště SCRATCH slouží pro uložení krátkodobých dat uživatelů, data jsou obvykle intenzivně používaná výpočetními uzly superpočítače.

- Úložiště SCRATCH bude mít čistou kapacitu minimálně 2PB, propustnost minimálně 1000 GB/s a bude těsně (s vysokou propustností a s nízkou latencí) připojeno na všechny uživatelsky dostupné uzly (výpočetní, přístupové).
- Předpokládáme použití technologie SSD disků (technologie NVMe) pro zajištěné vysoké propustnosti a I/O výkonu (5000 kIOPS).
- Jako souborový systém bude použit vysoce výkonný paralelní clusterový souborový systém „enterprise“ kvality, zajišťující kromě vysokého výkonu i vysokou bezpečnost přístupu k datům ve sdíleném prostředí.

#### Výpočetní síť

- Výpočetní síť bude mít rychlost portu minimálně 400Gb/s a latenci menší než 10 mikrosekund.
- Topologie sítě musí poskytovat neblokující ostrovy výpočetních uzlů o velikosti minimálně 32 uzlů.
- Síť musí podporovat hardwarovou akceleraci MPI komunikace.
- Síť musí podporovat IP protokol. 
- Síť musí být vhodná a podporovaná pro řešení úložiště SCRATCH.

#### Úložiště HOME

Úložiště HOME slouží pro uložení uživatelských nastavení operačního systému a aplikací v rámci superpočítače, předpokládáme tedy potřebu relativně nízké kapacity, přiměřené propustnosti a výkonu.

- Úložiště HOME bude mít čistou kapacitu minimálně 25TB a bude sdíleno na všechny uživatelsky dostupné uzly (výpočetní, přístupové).
- Úložiště bude postaveno na SSD discích.
- Předpokládáme použití technologie NFS s vysokou dostupností (HA).

#### Úložiště infrastruktury

Úložiště infrastruktury je určeno pro ukládání a sdílení dat infrastruktury superpočítače, tj. pro uložení systémových obrazů (image) serverů, logů, dat infrastrukturních služeb, uživatelského aplikačního vybavení, plánovače atd.

Úložiště bude mít čistou kapacitu minimálně 25TB.

Úložiště bude postaveno na SSD discích.

Konfigurace bude v režimu redundance/vysoké dostupnosti minimálně na úrovni disků, řadičů diskového pole, připojení k serverům a souborových serverů.

Úložiště infrastruktury bude připojeno k serverům (přímo či vhodnou sítí) blokovým způsobem anebo pomocí síťového souborového systému (např. NFS). Předpokládané použití ze strany zadavatele:

- APPS – aplikační software sdílený pomocí NFS na všechny uživatelsky dostupné servery

Pro realizaci úložiště infrastruktury a úložiště HOME lze použít jedno společné diskového pole.

#### Infrastrukturní a management servery

Systém bude obsahovat minimálně dva fyzické servery pro infrastrukturní služby a management výpočetního systému. Klíčové infrastrukturní služby budou realizovány v konfiguraci vysoké dostupnosti (HA).

Několik infrastrukturních serverů (předpokládaný počet cca 5ks) bude určeno pro běh služeb zadavatele.

Preferujeme – v případě použití malého počtu fyzických serverů – oddělení služeb na virtuální servery (použití serverové virtualizace).

#### Zálohování

Zálohování bude poskytovat zabezpečení dat infrastrukturních a management serverů, úložiště infrastruktury a úložiště HOME.

Zálohování bude řešeno bez využití pásek (na diskové úložiště) a bude využívat technologii pro vyšší efektivitu uložení dat (např. kompresi nebo deduplikaci). Zálohování bude využívat vyhrazené, nezávislé úložiště dat.

#### LAN síť

LAN síť bude zajišťovat komunikaci mezi zařízeními uvnitř superpočítače a poskytovat připojení do WAN sítě IT4Innovations.

LAN síť bude obsahovat veřejné a privátní části sítě. 

Veřejné části sítě (dále jen veřejné sítě), ve kterých budou použity veřejné IPv4 a IPv6 adresy, budou sloužit pro poskytování služeb dostupných z internetu. 

Privátní části sítě (dále jen privátní sítě), ve kterých budou použity privátní IPv4 adresy, budou sloužit pro vnitřní služby a pro management zařízení.

Bude zajištěna konektivita výpočetních serverů do LAN sítě a internetu.

Zařízením v privátních sítích musí být umožněn přístup do internetu přes NAT.

LAN síť bude rozdělena do různých L3 sítí. Pro každou L3 síť bude použita jiná L2 síť (VLAN nebo jiný aktivní prvek). Je nežádoucí používat jednu L2 síť pro více L3 sítí. Rozdělení sítí bude zajišťovat zejména oddělení těchto provozů:

- služby dostupné z internetu
- datová komunikace mezi servery (služby)
- management síťových aktivních prvků
- management diskových polí a storage zařízení
- management serverů (BMC, IPMI, apod.)
- management non-IT infrastruktury (napájení, chlazení apod.)

LAN síť nezbytná pro propojení přístupových serverů do WAN sítě bude řešena redundantními prvky. Aktivní prvky sítě budou vzdáleně řízené a centrálně spravovatelné.

#### Integrace do WAN sítě

Součástí zakázky je připojení do WAN sítě zadavatele.

Připojení do WAN sítě zadavatele musí poskytovat konektivitu min. 2x100 Gb/s, pro připojení jsou vyhrazeny dva porty QSFP28 na prvcích WAN sítě zadavatele.

#### Integrace do storage sítě

Součástí zakázky je připojení do storage sítě zadavatele. Pro realizaci se předpokládá použití minimálně dvou vyhrazených serverů implementujících síťové brány mezi storage sítí zadavatele (na technologii 100Gb/s Ethernet) a výpočetní sítí clusteru

Připojení do storage sítě zadavatele musí poskytovat konektivitu min. 2x100 Gb/s, pro připojení jsou vyhrazeny dva porty QSFP28 na prvcích storage sítě zadavatele.

#### Softwarové vybavení

Požadovanou součástí řešení superpočítače je softwarové vybavení.

Softwarové vybavení zahrnuje operační systémy všech serverů, firmware a ovladače hardware, systémové, komunikační a další knihovny, infrastrukturní software a software pro realizaci výpočetního prostředí superpočítače.

Infrastrukturní software a software pro realizaci výpočetního prostředí superpočítače zahrnuje software pro správu a provisioning serverů/clusteru, management software zařízení, software řešení datových úložišť a bran, sdílené a/nebo clusterové, paralelní souborové systémy, software infrastrukturních služeb, zálohovací software, software pro serverovou virtualizace (bude-li použita v řešení), software pro monitoring infrastruktury, sběr a analýza logů, optimalizovaný softwarový stack pro komunikaci ve výpočetní síti, optimalizované MPI a další.

Předpokládáme použití OS Linux na všech serverech řešení superpočítače.

Na clusteru bude provozován plánovač úloh Slurm.

#### Bezpečnost

Vzhledem k otevřenému charakteru centra IT4Innovations, které poskytuje služby širokému spektru uživatelů, usilujeme o bezpečnost našich systémů. IT4Innovations je držitelem certifikátů systému managementu bezpečnosti informací podle normy ISO 27001 (ISO/IEC 27001:2013, ČSN ISO/IEC 27001:2014). Preferuje použití operačního systému a softwarového vybavení s dobrou dostupností bezpečnostních aktualizací a jejich rychlou aplikaci. Dostupnost bezpečnostních aktualizací by měla být zajištěna po celou dobu provozování celého komplexního softwarového stacku.

#### Identity management

IT4Innovations provádí centralizovanou správu všech uživatelů centra. Informace o uživatelích jsou propagovány/synchronizovány z centrální repository na všechny provozované systémy/superpočítače. Realizace uživatelských účtů superpočítače bude používat technologie LDAP a SSSD. Účty uživatelů budou uloženy a spravovány v LDAP databázi. Pro realizaci uživatelských účtů a skupin budou použita LDAP schémata posixAccount a posixGroup. Správa uživatelských účtů a skupin bude realizována zabezpečeným protokolem LDAP. Správu uživatelských účtů a skupin bude realizovat výhradně zadavatel.

## HPCQC – AI výpočetní cluster

### Komponenty

Superpočítač je komplexní systém sestávající z výpočetních, úložných, síťových a dalších systémů a softwarového řešení určený pro provádění náročných výpočtů (HPC).

![A diagram of a project Description automatically generated](media/image10.png)

Obrázek 1 Orientační schéma řešení superpočítače VC III

**Výpočetní cluster** je tvořen **Výpočetními servery** propojenými **Výpočetní sítí** – vysokorychlostní sítí s nízkou latencí. Výpočetní cluster je určen pro provádění výpočetních úloh uživatelů. Výpočetní servery poskytují výpočetní výkon, Výpočetní síť umožňuje rychlou komunikaci mezi servery a efektivní provádění paralelních úloh. Pro servery clusteru je dále používáno též označení uzel.

**Přístupové servery** *–* servery sloužící pro přístup uživatelů, pro přípravu úloh a dat, kompilaci a ladění kódů, pro zpracování výsledků a pro přenos dat.

**Úložiště** slouží k ukládání a sdílení dat. Úložiště jsou realizována jako komplexní řešení úložných zařízení, I/O serverů (např. souborových serverů), datových sítí a potřebného softwarového vybavení na straně serverů i klientů. Úložiště poskytující souborové služby jsou označována jako **Souborová úložiště**.

IT4Innovations strukturuje uživatelská úložiště výpočetních clusterů takto:

- úložiště HOME – souborové úložiště pro uživatelská nastavení operačního systému a aplikací na superpočítači
- úložiště SCRATCH – souborové úložiště pro krátkodobá data uživatelů, intenzivně používaná výpočetními uzly superpočítače
- úložiště PROJECT – souborové úložiště pro střednědobá a dlouhodobá projektová data uživatelů, sdílená mezi superpočítači IT4Innovations (existující úložiště zadavatele, není součástí zakázky)

**Úložiště** infrastruktury je určeno pro ukládání a sdílení dat infrastruktury superpočítače, tj. pro uložení systémových obrazů (image) serverů, logů, dat infrastrukturních služeb, uživatelského aplikačního vybavení, plánovače atd.

**Infrastrukturní a management servery** jsou určené pro správu superpočítače, zdrojů, úloh, licencí a poskytování infrastrukturních služeb (např. DHCP, DNS, LDAP, licenční servery, plánovače, monitoring, logování atd.), zdrojů.

Řešení **Zálohování** zajišťuje ochranu dat před úplnou ztrátou v případě vážného selhání primárního úložiště dat, chyby apod.

Superpočítač obsahuje **Síťovou infrastrukturu,** tj. síťové propojení komponent, systémů tak, aby bylo dosaženo požadované funkcionality, byl zajištěn přístup na jednotlivé služby, byl zajištěn výkon, dostupnost a bezpečnost.

Síťovou infrastrukturu tvoří zejména Výpočetní síť, LAN síť, integrace do WAN sítě zadavatele, integrace do storage sítě zadavatele a případně další sítě (například datové sítě SAN) dle návrhu dodavatele*.*

**Výpočetní síť** propojuje výpočetní servery, přístupové servery, je použita pro zpřístupnění některých úložišť.

**LAN síť** zajišťuje komunikaci mezi zařízeními uvnitř superpočítače, slouží ke správě systému, poskytování infrastrukturních služeb atp.

**Integrace do WAN sítě** zadavatele zajišťuje propojení do WAN sítě zadavatele a zprostředkovaně služby internetu v superpočítači.

**Integrace do storage sítě** zadavatele zajišťuje propojení do storage sítě zadavatele, kde jsou připojena centralizovaná úložiště zadavatele (např. úložiště PROJECT), tak aby byla zajištěna dostupnost úložišť na uzlech superpočítače. Integrace je obvykle realizována síťovými branami realizujícími propojení storage sítě zadavatele (100 Gb/s Ethernet) a výpočetní sítě clusteru.

**Infrastrukturu pro provoz v datovém centru** tvoří. zejména racky potřebné pro umístění zařízení, řešení chlazení zařízení superpočítače, napájení, rozhraní a napojení na infrastrukturu datového centra.

**Softwarové vybavení** je nezbytnou součástí řešení superpočítače. Softwarové vybavení zahrnuje mj. operační systémy všech serverů, firmware a ovladače hardware, knihovny, infrastrukturní software, software pro realizaci výpočetního prostředí superpočítače a výpočetní aplikace.

### Řešení superpočítače

Řešení superpočítače musí umožňovat efektivní provádění mnoha současných výpočetních úloh všech fází životního cyklu úloh (příprava, výpočet, zpracování výsledků) různého typu (paralelní, sériové; dávkové, interaktivní) mnoha uživatelů, bude zajišťovat bezpečné uložení dat uživatelů a rychlý přístup k datům, efektivní správu systému, komponent, zdrojů a uživatelů.

Řešení musí poskytovat transparentní, jednotné, sdílené uživatelské prostředí a jednotný přístup k výpočetním zdrojům.

Redundance řešení musí být v takovém rozsahu, aby při selhání fyzické komponenty nedošlo k významnému omezení poskytování služeb (aby neselhala klíčová služba nutná pro běh řešení) nebo aby nedošlo ke ztrátě důležitých dat. Zabezpečení významných dat bude dále zajištěno zálohováním.

Všechny servery řešení budou umožňovat vzdálenou správu nezávislou na běhu operačního systému.

Řešení musí umožňovat efektivní provoz a nízké provozní náklady.

Superpočítač HPCQC – AI bude obsahovat tyto komponenty:

- **Výpočetní servery** 
- **Výpočetní síť**
- **Přístupové servery**
- **Úložiště HOME**
- **Úložiště SCRATCH**
- **Úložiště infrastruktury**
- **Infrastrukturní a management servery**
- **Zálohování**
- **Síťová infrastruktura**
  - **LAN síť**
  - **Integrace do WAN sítě** 
  - **Integraci do storage sítě**
- **Infrastruktura pro provoz v datovém centru**
- **Softwarové vybavení**

### Požadavky

#### Výpočetní servery

- minimálně 100 výpočetních serverů
- architektura x86_64, nebo ARM
- OS Linux
- jeden nebo dva procesory na výpočetní server
- minimálně 960 GB standardní paměti DDR RAM na výpočetní server
- min. 450 GB/s propustnost do paměti CPU/socket
- min. čtyři GPU akcelerátory
- výkon min. 4000 TFlop/s na server v FP32 (tensorflow/sparsity AI maximální teoretický výkon)
- minimálně 2 NIC pro vysokorychlostní síť s agregovanou šířkou pásma min. 800 Gb/s
- chlazení pomocí DLC, celkově min. 90% tepla do vody o vstupní teplotě min. 38 °C

#### Přístupové servery

- 2 přístupové (login) servery
- CPU, GPU a paměť serveru – shodná konfigurace jako u výpočetních serverů

#### Úložiště SCRATCH

Úložiště SCRATCH slouží pro uložení krátkodobých dat uživatelů, data jsou obvykle intenzivně používaná výpočetními uzly superpočítače.

- Úložiště SCRATCH bude mít čistou kapacitu minimálně 2PB, propustnost minimálně 1000 GB/s a bude těsně (s vysokou propustností a s nízkou latencí) připojeno na všechny uživatelsky dostupné uzly (výpočetní, přístupové).
- Předpokládáme použití technologie SSD disků (technologie NVMe) pro zajištěné vysoké propustnosti a I/O výkonu (5000 kIOPS).
- Jako souborový systém bude použit vysoce výkonný paralelní clusterový souborový systém „enterprise“ kvality, zajišťující kromě vysokého výkonu i vysokou bezpečnost přístupu k datům ve sdíleném prostředí.

#### Výpočetní síť

- Výpočetní síť bude mít rychlost portu minimálně 400Gb/s a latenci menší než 10 mikrosekund.
- Topologie sítě musí poskytovat neblokující ostrovy výpočetních uzlů o velikosti minimálně 32 uzlů.
- Síť musí podporovat hardwarovou akceleraci MPI komunikace.
- Síť musí podporovat IP protokol. 
- Síť musí být vhodná a podporovaná pro řešení úložiště SCRATCH.

#### Úložiště HOME

Úložiště HOME slouží pro uložení uživatelských nastavení operačního systému a aplikací v rámci superpočítače, předpokládáme tedy potřebu relativně nízké kapacity, přiměřené propustnosti a výkonu.

- Úložiště HOME bude mít čistou kapacitu minimálně 25TB a bude sdíleno na všechny uživatelsky dostupné uzly (výpočetní, přístupové).
- Úložiště bude postaveno na SSD discích.
- Předpokládáme použití technologie NFS s vysokou dostupností (HA).

#### Úložiště infrastruktury

Úložiště infrastruktury je určeno pro ukládání a sdílení dat infrastruktury superpočítače, tj. pro uložení systémových obrazů (image) serverů, logů, dat infrastrukturních služeb, uživatelského aplikačního vybavení, plánovače atd.

Úložiště bude mít čistou kapacitu minimálně 25TB.

Úložiště bude postaveno na SSD discích.

Konfigurace bude v režimu redundance/vysoké dostupnosti minimálně na úrovni disků, řadičů diskového pole, připojení k serverům a souborových serverů.

Úložiště infrastruktury bude připojeno k serverům (přímo či vhodnou sítí) blokovým způsobem anebo pomocí síťového souborového systému (např. NFS). Předpokládané použití ze strany zadavatele:

- APPS – aplikační software sdílený pomocí NFS na všechny uživatelsky dostupné servery

Pro realizaci úložiště infrastruktury a úložiště HOME lze použít jedno společné diskového pole.

#### Infrastrukturní a management servery

Systém bude obsahovat minimálně dva fyzické servery pro infrastrukturní služby a management výpočetního systému. Klíčové infrastrukturní služby budou realizovány v konfiguraci vysoké dostupnosti (HA).

Několik infrastrukturních serverů (předpokládaný počet cca 5ks) bude určeno pro běh služeb zadavatele.

Preferujeme – v případě použití malého počtu fyzických serverů – oddělení služeb na virtuální servery (použití serverové virtualizace).

#### Zálohování

Zálohování bude poskytovat zabezpečení dat infrastrukturních a management serverů, úložiště infrastruktury a úložiště HOME.

Zálohování bude řešeno bez využití pásek (na diskové úložiště) a bude využívat technologii pro vyšší efektivitu uložení dat (např. kompresi nebo deduplikaci). Zálohování bude využívat vyhrazené, nezávislé úložiště dat.

#### LAN síť

LAN síť bude zajišťovat komunikaci mezi zařízeními uvnitř superpočítače a poskytovat připojení do WAN sítě IT4Innovations.

LAN síť bude obsahovat veřejné a privátní části sítě. 

Veřejné části sítě (dále jen veřejné sítě), ve kterých budou použity veřejné IPv4 a IPv6 adresy, budou sloužit pro poskytování služeb dostupných z internetu. 

Privátní části sítě (dále jen privátní sítě), ve kterých budou použity privátní IPv4 adresy, budou sloužit pro vnitřní služby a pro management zařízení.

Bude zajištěna konektivita výpočetních serverů do LAN sítě a internetu.

Zařízením v privátních sítích musí být umožněn přístup do internetu přes NAT.

LAN síť bude rozdělena do různých L3 sítí. Pro každou L3 síť bude použita jiná L2 síť (VLAN nebo jiný aktivní prvek). Je nežádoucí používat jednu L2 síť pro více L3 sítí. Rozdělení sítí bude zajišťovat zejména oddělení těchto provozů:

- služby dostupné z internetu
- datová komunikace mezi servery (služby)
- management síťových aktivních prvků
- management diskových polí a storage zařízení
- management serverů (BMC, IPMI, apod.)
- management non-IT infrastruktury (napájení, chlazení apod.)

LAN síť nezbytná pro propojení přístupových serverů do WAN sítě bude řešena redundantními prvky. Aktivní prvky sítě budou vzdáleně řízené a centrálně spravovatelné.

#### Integrace do WAN sítě

Součástí zakázky je připojení do WAN sítě zadavatele.

Připojení do WAN sítě zadavatele musí poskytovat konektivitu min. 2x100 Gb/s, pro připojení jsou vyhrazeny dva porty QSFP28 na prvcích WAN sítě zadavatele.

#### Integrace do storage sítě

Součástí zakázky je připojení do storage sítě zadavatele. Pro realizaci se předpokládá použití minimálně dvou vyhrazených serverů implementujících síťové brány mezi storage sítí zadavatele (na technologii 100Gb/s Ethernet) a výpočetní sítí clusteru

Připojení do storage sítě zadavatele musí poskytovat konektivitu min. 2x100 Gb/s, pro připojení jsou vyhrazeny dva porty QSFP28 na prvcích storage sítě zadavatele.

#### Softwarové vybavení

Požadovanou součástí řešení superpočítače je softwarové vybavení.

Softwarové vybavení zahrnuje operační systémy všech serverů, firmware a ovladače hardware, systémové, komunikační a další knihovny, infrastrukturní software a software pro realizaci výpočetního prostředí superpočítače.

Infrastrukturní software a software pro realizaci výpočetního prostředí superpočítače zahrnuje software pro správu a provisioning serverů/clusteru, management software zařízení, software řešení datových úložišť a bran, sdílené a/nebo clusterové, paralelní souborové systémy, software infrastrukturních služeb, zálohovací software, software pro serverovou virtualizace (bude-li použita v řešení), software pro monitoring infrastruktury, sběr a analýza logů, optimalizovaný softwarový stack pro komunikaci ve výpočetní síti, optimalizované MPI a další.

Předpokládáme použití OS Linux na všech serverech řešení superpočítače.

Na clusteru bude provozován plánovač úloh Slurm.

#### Bezpečnost

Vzhledem k otevřenému charakteru centra IT4Innovations, které poskytuje služby širokému spektru uživatelů, usilujeme o bezpečnost našich systémů. IT4Innovations je držitelem certifikátů systému managementu bezpečnosti informací podle normy ISO 27001 (ISO/IEC 27001:2013, ČSN ISO/IEC 27001:2014). Preferuje použití operačního systému a softwarového vybavení s dobrou dostupností bezpečnostních aktualizací a jejich rychlou aplikaci. Dostupnost bezpečnostních aktualizací by měla být zajištěna po celou dobu provozování celého komplexního softwarového stacku.

#### Identity management

IT4Innovations provádí centralizovanou správu všech uživatelů centra. Informace o uživatelích jsou propagovány/synchronizovány z centrální repository na všechny provozované systémy/superpočítače. Realizace uživatelských účtů superpočítače bude používat technologie LDAP a SSSD. Účty uživatelů budou uloženy a spravovány v LDAP databázi. Pro realizaci uživatelských účtů a skupin budou použita LDAP schémata posixAccount a posixGroup. Správa uživatelských účtů a skupin bude realizována zabezpečeným protokolem LDAP. Správu uživatelských účtů a skupin bude realizovat výhradně zadavatel.

## Rozsah zakázky

Součástí zakázky je:

- komplexní implementace celého systému v datovém centru zadavatele (doprava, integrace do datového centra, instalace, konfigurace, ladění, testování, likvidace obalů)

- příprava a provedení akceptačních testů pro prokázání funkčnosti, vlastností a parametrů díla
- zaškolení obsluhy (školení)
- poskytování servisu, podpory a provádění pravidelných sw upgradů po dobu záruční doby
- konzultace v průběhu provozu řešení

## Závazný obsah Návrhu

Návrh musí obsahovat tyto informace:

1. **Návrh technického řešení** 

- návrh hardwarového řešení
  - uvedení zvažovaných komponent, jejich počty, názvy výrobců a modelů
- návrh softwarového řešení
  - uvedení zvažovaného SW vybavení, názvy výrobců, produktů a verzí
- výkonové a kapacitní parametry řešení
  - výpočetní výkon v FP64 a FP32 na úrovni komponent i agregovaný
  - paměťová propustnost
  - výkon úložných zařízení (jak agregovaná propustnost, tak výkon IOPS)
- energetická náročnost řešení 
  - specifikace proudového připojení [A]
- popis chlazení systému
  - rámcové uvedení kapacity [kW] odvodu tepla do okruhů s teplou a studenou vodou
  - uvedení souladu návrhu chlazení s technickými parametry chladících okruhů, především objemu průtoků a způsobených tlakových ztrát při chlazení plně zatíženého systému kapalinou o teplotě 38°C v okruhu zadavatele a s chemickým složením uvedeným v popisu vlastností datového sálu (směs voda/glykol)
  - v případě nesouladu řešení s vlastnostmi chladících okruhů prosím uveďte možnosti jak chlazení zajistit, ať již snížením teploty chladící kapaliny, či snížení tlakových ztrát za pomocí snížení objemu průtoku chladící kapaliny v okruhu zadavatele
- prostorová náročnost řešení 
  - použité racky, zabraná plocha, plošná i bodová zátěž [kg/m2] na podlahovou plochu
- předpokládaná časová dostupnost navrhovaných technologií

*Zadavatel požaduje, aby každý z účastníků PTK ve svém návrhu potvrdil, že zvažovaná technická řešení jsou realizovatelná včetně jejich finální akceptace do konce října roku 2026.*

- popis funkcionality a vlastností řešení
  - Explicitní uvedení jakým způsobem lze na navrženém HW provozovat akcelerovaným způsobem kvantový simulátor. Je potřeba uvést produktový název SW, verzi a referenci využití ve výzkumné instituci nebo soukromé firmě

*Funkcionalita kvantového simulátoru bude mandatorním požadavkem u systému HPCQC – AI a proto je potřeba volit komponenty především výpočetní části tak, aby akceleraci umožňovala.* 

- spolehlivost a dostupnost řešení
- soulad technického řešení (především výkonových a kapacitních parametrů) a rozpočtu
  - v případě, že požadované kapacitní a výkonové parametry zadavatele přesahují předpokládaný rozpočet, uveďte, prosím, varianty řešení v původním požadovaném rozsahu a taktéž adekvátně redukovaný návrh s dodržením daného rozpočtu. Varianty s původními požadovanými parametry prosím označte jako „Původní varianta“ a redukovanou verzi jako „Redukovaná varianta“
  - dále prosíme o explicitní potvrzení adekvátního poměru výpočetního výkonu výpočetních uzlů a kapacit síťového připojení výpočetních uzlů do vysokorychlostní sítě za účelem zpracování náročných úloh z oblasti umělé inteligence jako např. trénování velkých jazykových modelů jak z pohledu komunikace při paralelním trénování, tak přístupu na úložiště SCRATCH
  - taktéž prosíme o explicitní potvrzení adekvátního poměru kapacit a výkonu výpočetní a SCRATCH úložné části, především tedy celkový výpočetní výkon k agregované propustnosti a agregovanému výkonu IOPS operací
  - v případě, že byste doporučili jiné kapacity v rámci vysokorychlostní sítě či kapacity a výkon úložiště SCRATCH, uveďte toto prosím jako samostatnou pod-variantu varianty Původní a/nebo Redukované s označením „Optimalizovaná varianta“
- návrh musí být k dispozici rovněž v elektronické formě umožňující editaci

1. **Návrh záruky a servisních služeb**

- reaktivní služby
- proaktivní služby

1. **Návrh licenčních podmínek** upravujících práva a závazky zadavatele k navrhovanému řešení
2. **Orientační cenová kalkulace navrhovaného řešení Výpočetního clusteru VC III / HPCQC – AI výpočetního clusteru** (indikativní nabídka) včetně rozkladu cen na logické a funkční celky a služby v členění minimálně:

Výpočetní servery, Výpočetní síť, Přístupové servery, Úložiště HOME, Úložiště SCRATCH, Úložiště infrastruktury, Infrastrukturní a management servery, Zálohování, LAN síť, Integrace do WAN sítě, Integrace do storage sítě, Racky, Chlazení, Softwarové vybavení, Slurm s podporou, Napojení na infrastrukturu DC, Implementace, Školení, Servisní služby.

Indikativní nabídka bude rovněž obsahovat výhled ohledně stability cen. Zadavatel cílí na možnost/vhodnost využit inflační doložku nebo vhodné mechanismy pro narovnání kritických cenových rozdílů v cenách vzniklých v průběhu plnění navazující veřejné zakázky.

## Požadavky na záruku a servisní služby

Zadavatel požaduje zohlednit následující parametry záruky a servisních služeb:

- záruční doba 5 let
- autorizovaný servis
- servis v místě instalace
- jediné kontaktní místo pro hlášení poruch
- možnost hlášení poruch a vad 24 hodin denně

Kategorie vad:

- Vada kategorie A – vada, která zcela nebo podstatným způsobem znemožňuje užívání superpočítače,
- Vada kategorie B – vada, která nebrání užívání superpočítače, ale podstatným způsobem jej omezuje, nebo která vytváří riziko znemožnění užívání superpočítače,
- Vada kategorie C – jiná vada, která není vadou kategorie A ani B

Zahájení řešení odstranění vady:

- Vada kategorie A – okamžitě po nahlášení vady
- Vada kategorie B – maximálně do 2 hodin od nahlášení vady
- Vada kategorie C – maximálně do 24 hodin od nahlášení vady

Odstranění vady:

- Vada kategorie A – do 24 hodin od nahlášení vady
- Vada kategorie B – do 72 hodin od nahlášení vady
- Vada kategorie C – do 7 pracovních dní od nahlášení vady

Za odstranění vady kategorie A nebo B lze považovat poskytnutí akceptovatelného náhradního řešení. Náhradní řešení vady kategorie A se považuje za nahlášenou vadu kategorie B a náhradní řešení vady kategorie B se považuje za nahlášenou vadu kategorie C; přípustné je jen to náhradní řešení, které skutečně umožňuje změnu kategorizace vady.

## Infrastruktura zadavatele

### Datové centrum

IT4Innovations národní superpočítačové centrum provozuje veškeré systémy ve svém datovém sále umístěném v budově IT4Innovations.

Datové centrum IT4Innovations disponuje redundantními zdroji zálohovaného napájení (dvě nezávislé napájecí větve, redundance 1+1) rozvodné soustavy 400/230 V;3+N+PE; 50 Hz; TN-S.

Datový sál o výměře 511 m2 poskytuje světlou výšku mezi systémovou podlahou a stropním podhledem 2.9 m.

#### Chlazení na datovém sále — současný stav

Chlazení pro datový sál poskytuje pět samostatných chladících kapalinových okruhů – dva okruhy teplé vody teploty a tři okruhy studené vody.

 

V datovém sále jsou ve zdvojené podlaze vyhotoveny tři větve z každého z pěti chladících okruhů. Na větvích jsou pro napojení technologie připraveny odbočky s bezúkapovými uzávěry DN65. Odbočky jsou umístěné pod technologickou podlahou datového sálu a jsou přístupné po vyjmutí některé z dlaždic technologické podlahy. V okruzích je použita směs 35% propylenglykol a 65% voda. 

 

Základní parametry chladících okruhů, včetně údajů pro připojení:

TV1 – okruh Teplé Vody – červený:

- Hydraulické zakončení: Victaulic UK 76,1
- Pracovní tlak: 4,5bar
- diferenční tlak pro datový sál: 50kPa
- Průtok: 40m3/hod
- Vstupní teplota chladícího média: 30°C

 TV2 – okruh Teplé Vody – žlutý:

- Hydraulické zakončení: Victaulic UK 76,1
- Pracovní tlak: 4,5bar
- diferenční tlak pro datový sál: 50kPa
- Průtok: 40m3/hod
- Vstupní teplota chladícího média: 30°C

 SV1 – okruh Studené Vody – zelený:

- Hydraulické zakončení: Victaulic UK 76,1
- Pracovní tlak: 4,5bar
- diferenční tlak pro datový sál: 100kPa
- Průtok: 20m3/hod
- Vstupní teplota chladícího média 11,5°C

 SV2 – okruh Studené Vody – modrý:

- Hydraulické zakončení: Victaulic UK 76,1
- Pracovní tlak: 4,5bar
- diferenční tlak pro datový sál: 100kPa
- Průtok: 20m3/hod
- Vstupní teplota chladícího média 11,5°C

 SV3 – okruh Studené Vody – tyrkysový:

- Hydraulické zakončení: Victaulic UK 76,1
- Pracovní tlak: 4,5bar
- diferenční tlak pro datový sál: 100kPa
- Průtok: 20m3/hod
- Vstupní teplota chladícího média 11,5°C

#### Chlazení na datovém sále — plánovaný stav

Zadavatel předpokládá, že v rámci plánované modernizace datového sálu dojde k navýšení teploty okruhů teplé vody na 38°C a navýšení kapacity o další (třetí okruh teplé vody). Předpokládaný termín realizace je do konce listopadu 2026. Z tohoto důvodu již zadavatel očekává technická řešení výpočetní části clusteru (plus další, je-li to technický možné) umožňující odvod tepla do okruhů s provozní teplotou cca. 38°C.

### WAN síť

WAN síť zadavatele je postavena na technologii 100Gb/s Ethernet a je tvořena dvěma hraničními prvky – L3 switchi Cisco Nexus 9336C-FX2 s porty QSFP28. Hraniční prvky jsou vzájemně propojeny čtyřmi 100Gb/s propoji. 

Hraniční prvky WAN sítě nejsou osazeny transceivery, je potřeba je dodat.

### Storage síť 

Storage síť zadavatele je postavena na technologii 100Gb/s Ethernet a je tvořena dvěma hraničními prvky – L3 switchi Cisco Nexus 9336C-FX2 s porty QSFP28. Hraniční prvky jsou vzájemně propojeny čtyřmi 100Gb/s propoji. Storage síť je připojena do centrální 100Gb/s WAN/LAN sítě zadavatele čtyřmi 100Gb/s propoji.

Hraniční prvky storage sítě nejsou osazeny transceivery, je potřeba je dodat.


06_PTK/vyzva/vyzva_PTK_VCIII_CLARA.pdf
<!-- PAGE 1 -->**Nadlimitní veřejné zakázky na dodávky „Výpočetní cluster VC III" a „HPCQC – AI výpočetní cluster" Zadavatel: Vysoká škola báňská – Technická univerzita Ostrava**

se sídlem Ostrava – Poruba, 17. listopadu 2172/15, PSČ: 708 00, IČ: 61989100, zastoupena prof. RNDr. Václavem Snášelem, CSc., rektorem, profil zadavatele: https://zakazky.vsb.cz/

Kontaktní osoba: Ing. Jan Juřena, tel.: + 420 597 329 579, email: jan.jurena@vsb.cz

# VÝZVA K ÚČASTI NA PŘEDBĚŽNÉ TRŽNÍ KONZULTACI

ve smyslu § 33 zákona č. 134/2016 Sb., o zadávání veřejných zakázek, ve znění pozdějších předpisů (dále jen „ **ZZVZ** ")

Vysoká škola báňská – Technická univerzita Ostrava, se sídlem Ostrava – Poruba, 17. listopadu 2172/15, PSČ: 708 00, IČ: 61989100, jako zadavatel veřejných zakázek s názvem

**„Výpočetní cluster VC III" a „HPCQC – AI výpočetní cluster"**

tímto vyzývá dodavatele

**k účasti na předběžné tržní konzultaci.**

<!-- PAGE 2 -->1. ## 1\. Obecné informace

Zadavatel v souladu s § 33 ZZVZ dává na vědomí, že povede tržní konzultace (dále též „PTK") s cílem připravit zadávací podmínky a informovat dodavatele o svých záměrech a požadavcích a vyzývá dodavatele k účasti na předběžné tržní konzultacích v rámci dvou zadávacích řízení „Výpočetní cluster VC III" a „HPCQC – AI výpočetní cluster". Ačkoliv z technického hlediska mohou být výsledná řešení do jisté míry podobná, bude každý výpočetní systém pořizován na základě samostatného zadávacího řízení, jelikož se jedná o dva samostatné funkční celky. Mezi další důvody patří zejména odlišný způsob financování. Aby zadavatel ověřil své předpoklady o rozsahu poskytovaných služeb a předešel situaci, kdy nastaví zadávací podmínky diskriminačně, nepřiměřeně či na daném trhu nestandardně, hodlá využít institut předběžných tržních konzultací, a to z důvodu:

1. Ověření specifikace předmětu veřejné zakázky a zadávacích podmínek tak, aby nejlépe odpovídaly potřebám zadavatele a současně možnostem trhu,
2. identifikace možných alternativních způsobů splnění potřeb zadavatele,
3. rozšíření informovanosti zadavatele o předmětu veřejné zakázky a o aktuálních možnostech trhu či případných specifických podmínkách plnění z pohledu dodavatelů.

## 1.1 Základní informace o předmětu navazující veřejné zakázky

Zadavatel pro potřeby PTK stanovil soubor požadavků (technických, obchodních a dalších podmínek) týkajících se zamýšleného výpočetního clusteru a snaží se najít optimální způsob, jak tyto potřeby naplnit. Bližší informace o předmětu plnění veřejné zakázky jsou uvedeny v příloze č. 1 této výzvy – Základní požadavky zadavatele na předmět veřejné zakázky. Předpokládaná hodnota navazujícího zadávacího řízení „Výpočetní cluster VC III" činí 195 500 000 Kč. Předpokládaná hodnota navazujícího zadávacího řízení „HPCQC – AI výpočetní cluster" činí 177 000 000 Kč bez DPH. Zakázka „Výpočetní cluster VC III" je financována z prostředků operačního programu Jan Amos Komenský (OP JAK), projekt Modernizace e-INFRA CZ II (CZ.02.01.01/00/23_016/0008329) a vlastních prostředků. Zakázka „HPCQC – AI výpočetní cluster" je financována z prostředků operačního programu Jan Amos Komenský (OP JAK), projekt Centrum pro umělou inteligenci a kvantové výpočty v systémovém výzkumu mozku (registrační číslo: CZ.02.01.01/00/23_029/0008437), akronym CLARA, a z vlastních zdrojů

## 1.2 Podmínky účastni v navazujícím zadávacím řízení

Mimo technických a obchodních (popř. i dalších) podmínek účasti v zadávacím řízení bude zadavatel požadovat předložení dokladů o splnění kvalifikace. Tj. o splnění:

1. základní způsobilosti podle § 74 ZZVZ,
2. ekonomické kvalifikace podle § 77 ZZVZ,
3. technické kvalifikace podle § 79 ZZVZ. Kritéria technické kvalifikace budou stanovena jako seznam významných dodávek předložený dodavatelem. Vymezení významné dodávky bude odpovídat předmětu navazující veřejné zakázky.

<!-- PAGE 3 -->1. ## 2\. Předpokládaný harmonogram

| Ukončení PTK |  | 06/2025 |
| --- | --- | --- |
| Zahájení navazujícího | zadávacího řízení | 07/2025 |
| Uzavření smlouvy |  | 12/2025 |
| Dodávka a akceptace |  | 10/2026 |

1. ## 3\. Způsob vedení tržní konzultace

PTK bude probíhat v českém jazyce. Zadavatel si dále vyhrazuje právo na použití jiného, zejména pak anglického jazyka, při vedení PTK. Zadavatel v souladu s § 36 odst. 4 ZZVZ deklaruje, že pokud bude zadávací dokumentace použitá v navazujícím zadávacím řízení obsahovat informace, které budou výsledkem předběžné tržní konzultace, označí v zadávací dokumentaci tyto informace, identifikuje osoby, které se na předběžné tržní konzultaci podílely, a uvede všechny podstatné informace, které byly obsahem předběžné tržní konzultace. Zadavatel upozorňuje, že do zadávací dokumentace zahrne pouze takové informace, které budou ze strany dodavatele řádně podloženy a odůvodněny.

## 3.1 Návrh výpočetního clusteru

Zadavatel požaduje, aby dodavatel, který má zájem účastnit se PTK, zaslal do **9. 6. 2025** prostřednictvím komunikačního kanálu profilu zadavatele https://zakazky.vsb.cz/contract_display_2061.html nebo prostřednictvím e-mailu na adresu superpocitac@it4i.cz Návrh výpočetního clusteru (dále jen „Návrh"). Uvedený termín může být prodloužen na základě písemné žádosti odeslané prostřednictvím komunikačního kanálu profilu zadavatele nebo na uvedenou e-mailovou adresu nebo.

**Zadavatel žádá všechny účastníky PTK, aby, pokud možno, dodrželi stanovený termín.**

## 3.1.1 Požadovaný obsah Návrhu

Zadavatel požaduje předložení Návrhu pro tři různé systémy:

1. VC III – podrobněji vizte kapitolu 4 přílohy č. 1 této výzvy.
2. HPCQC – AI výpočetní cluster – podrobněji vizte kapitolu 5 přílohy č. 1 této výzvy V případě, že účastník není schopen předložit Návrh pro oba systémy, uvede tuto skutečnost spolu se stručným odůvodněním ve svém Návrhu. Důvody, které účastníka vedly k nemožnosti zpracovat Návrh pro některý ze systémů mohou být různé, např. technické (nedodržení technických požadavků zadavatele), časové (nedodržení termínu plnění), cenové atd. Návrh bude dále obsahovat alespoň:
3. Návrh technického řešení
4. Návrh záruky a servisních služeb
5. Návrh licenčních podmínek upravujících práva a závazky zadavatele k navrhovanému řešení
6. Orientační cenovou kalkulaci navrhovaného řešení Výpočetního clusteru VC III / HPCQC – AI výpočetního clusteru Podrobnosti ohledně obsahu návrhu jsou uvedeny v kapitole 7 přílohy č. 1 této výzvy. Zadavatel zařadí do předběžné tržní konzultace dodavatele, kteří doručí Návrh ve stanoveném termínu.

<!-- PAGE 4 -->## 3.2 Další průběh PTK

Na základě obdržených Návrhů zadavatel provede přehodnocení technických požadavků a odpovídajícím způsobem upraví přílohu č. 1. Následně zadavatel předpokládá vedení individuální konzultace s každým z účastníků PTK. Vyžádá-li si to situace, bude účastníkům poskytnuta upravená příloha č. 1 spolu s výzvou ke změně Návrhů a / nebo k poskytnutí dalších vstupů. Tento postup lze opakovat až do okamžiku, kdy zadavatel dosáhne cílů stanovených v čl. 1 této výzvy. Zadavatel si dále vyhrazuje právo vést předběžné tržní konzultace s využitím písemných elektronických komunikačních prostředků (např. e-mail, komunikační systém REDMINE), telekonference či formou osobního jednání s jednotlivými dodavateli. Ze všech osobních jednání a jednání vedených s využitím telekonference bude pořízen audiovizuální nebo zvukový záznam. Zadavatel si před zahájením jednání vyžádá souhlas dodavatele s pořízením takového záznamu.

_________________________ prof. RNDr. Václav Snášel, CSc. rektor

1. ## 4\. Přílohy

Příloha č. 1 – Základní požadavky zadavatele na předmět veřejné zakázky


06_PTK/Okruhy_pro_diskizi_PTK.docx
<!-- PAGE 1 -->Okruhy pro diskuzi v PTK **„Výpočetní cluster VC III“ a „HPCQC – AI výpočetní cluster“**

1. Efektivita chlazení

Připravte prosím informace o dostupnosti řešení (vhodné modelové řady pro vhodné výpočetní technologie), kde výpočetní servery využívají chlazení pomocí DLC s odvodem tepla do DLC okruhu v hodnotě 80 % a více z celkově generovaného tepla při vstupní teplotě chladící kapaliny cca. 38 °C. 

1. Přístupové servery s akcelerátory pro inferenci

Připravte prosím návrh řešení Přístupových serverů (login uzly) s použitím GPU stejné architektury jako u výpočetních serverů, kde GPU by byla z modelové řady vhodné pro primárně pro inferenci. Servery mohou mít jiný formát provedení (modelová řada), než jsou navrhované výpočetní servery. Počet inferenčních karet by měl být v rozsahu 1-2 GPU. 

1. Datové úložiště SCRATCH

Připravte prosím návrh řešení datového úložiště SCRATCH s nově definovanými klíčovými výkonnostními parametry:

1. Kapacita celkem 2PB (použitelná uživatelem na úrovni souborového systému)
2. Dlouhodobá agregovaná propustnost pro operace: Zápis 600 GB/s, Čtení 750 GB/s
3. Dlouhodobý agregovaný výkon vstupně výstupních operací: 5000 kIOP/s

1. Připojení výpočetních serverů do výpočetní sítě

Připravte prosím návrh řešení, tak aby jeden výpočetní server dimenzován se 4 GPU byl do výpočetní sítě připojen celkovým agregovaným výkonem 800 Gb/s. Uveďte prosím počet a typ použitých síťových adaptérů a počet linek mezi výpočetním serverem a přepínačem (nebo uveďte počet použitých portů na přepínači jedním serverem). Uveďte prosím Vaše stanovisko k danému poměru propustnosti a výkonu výpočetního serveru (tedy poměr 4 GPU : 800 Gb/s propustnosti).

1. Topologie výpočetní sítě

Připravte prosím návrh řešení s požadavkem na 16 neblokujících serverů v rámci jednoho ostrovu výpočetní sítě (snížení požadavku z 32 neblokujících serverů). Uveďte prosím, zda-li takto definovaný požadavek nemá z Vašeho pohledu negativní dopady na návrh řešení a výpočetní výkon celého řešení.

1. Výpočetní servery na platformě AMD

Připravte prosím návrh řešení výpočetních serverů s použitím 4x GPU na platformě AMD. Uveďte prosím odhadovanou velikost partice s výpočetními servery v rámci dostupného rozpočtu.

1. Akcelerace kvantového simulátoru na platformě AMD GPU

S ohledem na uvedená možná řešení softwarového simulování kvantových počítačů s pomocí akcelerace na GPU kartách firmy AMD, uveďte prosím technické detaily o softwarové platformě, úrovni akcelerace (částečný/úplný běh na GPU), škálování/sizing na daném typu AMD GPU (počet qubitů – vztah k velikosti operační paměti GPU), referenci nasazení (velikost, uživatel/centrum).

S ohledem na body 1-7 prosím připravte dopad na cenovou kalkulaci ve stejném formátu jako pro původní návrh řešení (viz „Orientační cenová kalkulace“).
Pages and tables 0 pages · 0 tables
06_PTK/pokracovani_PTK_HPCQC_AI.pdf 4 pages · 1 tables
<!-- PAGE 1 -->**Nadlimitní veřejná zakázka na dodávky HPCQC – AI výpočetní cluster Zadavatel: Vysoká škola báňská – Technická univerzita Ostrava**

se sídlem Ostrava – Poruba, 17. listopadu 2172/15, PSČ: 708 00, IČ: 61989100, zastoupena prof. RNDr. Václavem Snášelem, CSc., rektorem, profil zadavatele: https://zakazky.vsb.cz/

Kontaktní osoba: Ing. Jan Juřena, tel.: + 420 597 329 579, email: jan.jurena@vsb.cz

# POKRAČOVÁNÍ PŘEDBĚŽNÉ TRŽNÍ KONZULTACE

ve smyslu § 33 zákona č. 134/2016 Sb., o zadávání veřejných zakázek, ve znění pozdějších předpisů (dále jen „ **ZZVZ** ")

<!-- PAGE 2 -->1. ## 1\. Dosavadní průběh předběžné tržní konzultace

Zadavatel v souladu s § 33 ZZVZ zahájil 22. 5. 2025 zveřejněním výzvy k účasti předběžnou tržní konzultaci (dále jen „PTK") v rámci dvou navazujících zadávacích řízení „Výpočetní cluster VCIII – IT4I" a „HPCQC – AI výpočetní cluster". 8. 9. 2025 ukončil zadavatel část PTK vztahující se k veřejné zakázce „Výpočetní cluster VCIII – IT4I" a zahájil související zadávací řízení, které aktuálně směřuje k uzavření smlouvy s vybraným dodavatelem. Poznatky z průběhu tohoto zadávacího řízení (zejm. dotazy účastníků a obsah nabídek) byly, a v současné době stále jsou, postupně implementovány do technického zadání veřejné zakázky na pořízení HPCQC – AI výpočetního clusteru. Zadavatel je s ohledem na aktuální právní úpravu rovněž povinen zohlednit dopad novelizovaného zákona o kybernetické bezpečnosti. Z tohoto důvodu se zadavatel vrací k PTK k navazujícímu zadávacímu řízení „HPCQC – AI výpočetní cluster" s cílem dále konzultovat technické podmínky (zadání) a poskytnout a konzultovat další podmínky účasti v zadávacím řízení.

1. ## 2\. Dotazy zadavatele

S ohledem na vývoj na trhu a informace získané v průběhu zadávacího řízení „Výpočetní cluster VCIII – IT4I" vznáší zadavatel dotazy, které se týkají poskytnutých návrhů technického řešení pro HPCQC – AI výpočetní cluster, resp. k předmětu plnění navazujícího zadávacího řízení. Zadavatel plánuje lépe reflektovat výkon řešení pro AI specifické úlohy pomocí standardního benchmarku HPL, nicméně s využitím emulace FP64 pomocí nižší přesnosti, jako například použitím tzv. Ozakiho schématu. Předpokládaná definice takovéhoto vymezení by byla: *Pro realizaci měření není nutno použít referenční implementaci benchmarku LINPACK, lze použít optimalizovanou implementaci benchmarku. Použitá implementace benchmarku však musí zcela splňovat specifikaci benchmarku. Optimalizace překladu zdrojového kódu a optimalizace běhu benchmarku je možná za předpokladu, že negativně neovlivní správnost provedení benchmark – tj. zejména, že budou reálně provedeny výpočty v požadovaném rozsahu a přesnosti, a že budou správně určeny časy běhu a výsledky měření. Není povoleno použití verze benchmarku se smíšenou přesnosti (tzv. HPL-MxP). Výpočet v HPL musí mít tzv. „relativní přesnost stroje" (relative machine precision – EPS) menší než 10E-16 a tzv. „škálovaný residuál" (scaled residual) musí být menší nebo rovný 16.*

1. **Potvrďte, zda je výše uvedený přístup k měření HPL s případnou emulací FP64:**
2. technicky realizovatelný na vámi navrhovaném řešení,
3. a v souladu s požadavky na platnost benchmarku HPL (včetně kritérií EPS a scaled residual).
4. **Uveďte očekávaný výkon v FP64:**
5. na jednu GPU kartu,
6. pro celý systém, a to v obou variantách:
7. bez emulace FP64,
8. s emulací FP64. (Uveďte, zda jde o teoretický odhad, zkušenost z reálného měření, nebo extrapolaci.)
9. **Pro každou variantu řešení uveďte:**

| počet • | GPU, |  |
| --- | --- | --- |
| přesný • | typ/model | GPU, |
| včetně klíčových |  | parametrů: |

<!-- PAGE 3 -->- FP64 peak výkon,
- FP32 / TF32 / BF16 výkon,
- velikost a typ paměti,
- propustnost paměti.
- **Pokud navrhujete použití emulace FP64, uveďte:**
- jakou konkrétní metodu snížené přesnosti doporučujete,
- proč ji považujete za vhodnou pro HPL,
- jaký očekáváte dopad na: o výkon na jednu GPU, o výkon celého systému, o splnění podmínek EPS a scaled residual.
- **Finanční prostředky na HPCQC – AI výpočetní cluster jsou v původní výši. Zadavatel očekává zachování kapacity a výkonu úložiště SCRATCH dle původního zadání. Pokud došlo ke změnám cen oproti původní nabídce na začátku PTK, zejména u paměťových modulů (RAM), SSD/NVMe úložišť, a GPU, uveďte prosím:**
- velikost systému v počtu uzlů,
- celkový počet GPU,
- celkový výkon.
- **Dále prosím uveďte, zda očekáváte změny cen v následujících 12 měsících, a pokud ano, u kterých komponent a v jakém řádu (např. ±5 %, ±10 %, více).**

## 2.1 Odpověď na dotazy zadavatele

Zadavatel žádá účastníky PTK, aby do **9. 2. 2026** doručili svou odpověď na dotazy vznesené v bodě 2 tohoto dokumentu. Odpověď lze doručit prostřednictvím komunikačního kanálu profilu zadavatele https://zakazky.vsb.cz/contract_display_2061.html nebo prostřednictvím e-mailu na adresu superpocitac@it4i.cz. Uvedený termín může být prodloužen na základě písemné žádosti odeslané prostřednictvím komunikačního kanálu profilu zadavatele nebo na uvedenou e-mailovou adresu nebo.

**Zadavatel žádá všechny účastníky PTK, aby, pokud možno, dodrželi stanovený termín.**

1. ## 3\. Informace vztahující se k podmínkám účasti v zadávacím řízení

Zadavatel upozorňuje účastníky PTK, že v zadávací dokumentaci bude povinen zohlednit dopady zákona č. 264/2025 Sb., o kybernetické bezpečnosti (dále jen "ZKB"). Novela ZKB účinná od 1.11. 2025 výrazně rozšiřuje okruh povinných subjektů s předpokládaným dopadem i na VŠB-TUO coby provozovatele tzv. kritické infrastruktury. VŠB-TUO aktuálně čeká na výsledek řízení o registraci regulované služby vedeného Národním úřadem pro kybernetickou a informační bezpečnost (dále jen "NÚKIB"). Předpokladem je, že se VŠB-TUO stane tzv. poskytovatelem regulované služby v režimu vyšších povinností. VŠB-TUO bude následně mj. z pozice zadavatele povinna vyhodnotit možný dopad rizik a následně přiměřeně aplikovat doporučení NÚKIB. S ohledem na předběžnou analýzu rizik vyhotovenou ze strany IT4Innovations je nanejvýš pravděpodobné, že dojde z naší strany k zákazu dodávek technologií vybraných čínských výrobců při zadávání relevantních veřejných zakázek vč dodávky clusteru HPCQC-AI.

**Zadavatel žádá, abyste tuto informaci případně zohlednili a/nebo okomentovali v odpovědích na dotazy vznesené v bodě 2 tohoto dokumentu. Zejména ve vztahu k dotazu č. 6.**

<!-- PAGE 4 -->1. ## 4\. Další průběh PTK

Zadavatel již neplánuje organizaci dalšího kola PTK. V případě potřeby se na účastníky PTK obrátí individuálně pro vysvětlení doručených odpovědí na vznesené dotazy. Zadavatel předpokládá ukončení PTK v průběhu února 2026 a zahájení souvisejícího zadávacího řízení do konce Q1 2026.

_________________________ Ing. Jan Juřena ved. odd. VZ a právních služeb IT4Innovations

Page 1

**Nadlimitní veřejná zakázka na dodávky HPCQC – AI výpočetní cluster Zadavatel: Vysoká škola báňská – Technická univerzita Ostrava**

se sídlem Ostrava – Poruba, 17. listopadu 2172/15, PSČ: 708 00, IČ: 61989100, zastoupena prof. RNDr. Václavem Snášelem, CSc., rektorem, profil zadavatele: https://zakazky.vsb.cz/

Kontaktní osoba: Ing. Jan Juřena, tel.: + 420 597 329 579, email: jan.jurena@vsb.cz

# POKRAČOVÁNÍ PŘEDBĚŽNÉ TRŽNÍ KONZULTACE

ve smyslu § 33 zákona č. 134/2016 Sb., o zadávání veřejných zakázek, ve znění pozdějších předpisů (dále jen „ **ZZVZ** ")

Page 2

## 1\. Dosavadní průběh předběžné tržní konzultace

Zadavatel v souladu s § 33 ZZVZ zahájil 22. 5. 2025 zveřejněním výzvy k účasti předběžnou tržní konzultaci (dále jen „PTK") v rámci dvou navazujících zadávacích řízení „Výpočetní cluster VCIII – IT4I" a „HPCQC – AI výpočetní cluster". 8. 9. 2025 ukončil zadavatel část PTK vztahující se k veřejné zakázce „Výpočetní cluster VCIII – IT4I" a zahájil související zadávací řízení, které aktuálně směřuje k uzavření smlouvy s vybraným dodavatelem. Poznatky z průběhu tohoto zadávacího řízení (zejm. dotazy účastníků a obsah nabídek) byly, a v současné době stále jsou, postupně implementovány do technického zadání veřejné zakázky na pořízení HPCQC – AI výpočetního clusteru. Zadavatel je s ohledem na aktuální právní úpravu rovněž povinen zohlednit dopad novelizovaného zákona o kybernetické bezpečnosti. Z tohoto důvodu se zadavatel vrací k PTK k navazujícímu zadávacímu řízení „HPCQC – AI výpočetní cluster" s cílem dále konzultovat technické podmínky (zadání) a poskytnout a konzultovat další podmínky účasti v zadávacím řízení.

## 2\. Dotazy zadavatele

S ohledem na vývoj na trhu a informace získané v průběhu zadávacího řízení „Výpočetní cluster VCIII – IT4I" vznáší zadavatel dotazy, které se týkají poskytnutých návrhů technického řešení pro HPCQC – AI výpočetní cluster, resp. k předmětu plnění navazujícího zadávacího řízení. Zadavatel plánuje lépe reflektovat výkon řešení pro AI specifické úlohy pomocí standardního benchmarku HPL, nicméně s využitím emulace FP64 pomocí nižší přesnosti, jako například použitím tzv. Ozakiho schématu. Předpokládaná definice takovéhoto vymezení by byla: *Pro realizaci měření není nutno použít referenční implementaci benchmarku LINPACK, lze použít optimalizovanou implementaci benchmarku. Použitá implementace benchmarku však musí zcela splňovat specifikaci benchmarku. Optimalizace překladu zdrojového kódu a optimalizace běhu benchmarku je možná za předpokladu, že negativně neovlivní správnost provedení benchmark – tj. zejména, že budou reálně provedeny výpočty v požadovaném rozsahu a přesnosti, a že budou správně určeny časy běhu a výsledky měření. Není povoleno použití verze benchmarku se smíšenou přesnosti (tzv. HPL-MxP). Výpočet v HPL musí mít tzv. „relativní přesnost stroje" (relative machine precision – EPS) menší než 10E-16 a tzv. „škálovaný residuál" (scaled residual) musí být menší nebo rovný 16.*

1. **Potvrďte, zda je výše uvedený přístup k měření HPL s případnou emulací FP64:**

- technicky realizovatelný na vámi navrhovaném řešení,

- a v souladu s požadavky na platnost benchmarku HPL (včetně kritérií EPS a scaled residual).

1. **Uveďte očekávaný výkon v FP64:**

1. na jednu GPU kartu,

1. pro celý systém, a to v obou variantách:

- bez emulace FP64,

- s emulací FP64. (Uveďte, zda jde o teoretický odhad, zkušenost z reálného měření, nebo extrapolaci.)

1. **Pro každou variantu řešení uveďte:**

| počet • | GPU, |  |
| --- | --- | --- |
| přesný • | typ/model | GPU, |
| včetně klíčových |  | parametrů: |

Page 3

- FP64 peak výkon,

- FP32 / TF32 / BF16 výkon,

- velikost a typ paměti,

- propustnost paměti.

1. **Pokud navrhujete použití emulace FP64, uveďte:**

- jakou konkrétní metodu snížené přesnosti doporučujete,

- proč ji považujete za vhodnou pro HPL,

- jaký očekáváte dopad na: o výkon na jednu GPU, o výkon celého systému, o splnění podmínek EPS a scaled residual.

1. **Finanční prostředky na HPCQC – AI výpočetní cluster jsou v původní výši. Zadavatel očekává zachování kapacity a výkonu úložiště SCRATCH dle původního zadání. Pokud došlo ke změnám cen oproti původní nabídce na začátku PTK, zejména u paměťových modulů (RAM), SSD/NVMe úložišť, a GPU, uveďte prosím:**

- velikost systému v počtu uzlů,

- celkový počet GPU,

- celkový výkon.

1. **Dále prosím uveďte, zda očekáváte změny cen v následujících 12 měsících, a pokud ano, u kterých komponent a v jakém řádu (např. ±5 %, ±10 %, více).**

## 2.1 Odpověď na dotazy zadavatele

Zadavatel žádá účastníky PTK, aby do **9. 2. 2026** doručili svou odpověď na dotazy vznesené v bodě 2 tohoto dokumentu. Odpověď lze doručit prostřednictvím komunikačního kanálu profilu zadavatele https://zakazky.vsb.cz/contract_display_2061.html nebo prostřednictvím e-mailu na adresu superpocitac@it4i.cz. Uvedený termín může být prodloužen na základě písemné žádosti odeslané prostřednictvím komunikačního kanálu profilu zadavatele nebo na uvedenou e-mailovou adresu nebo.

**Zadavatel žádá všechny účastníky PTK, aby, pokud možno, dodrželi stanovený termín.**

## 3\. Informace vztahující se k podmínkám účasti v zadávacím řízení

Zadavatel upozorňuje účastníky PTK, že v zadávací dokumentaci bude povinen zohlednit dopady zákona č. 264/2025 Sb., o kybernetické bezpečnosti (dále jen "ZKB"). Novela ZKB účinná od 1.11. 2025 výrazně rozšiřuje okruh povinných subjektů s předpokládaným dopadem i na VŠB-TUO coby provozovatele tzv. kritické infrastruktury. VŠB-TUO aktuálně čeká na výsledek řízení o registraci regulované služby vedeného Národním úřadem pro kybernetickou a informační bezpečnost (dále jen "NÚKIB"). Předpokladem je, že se VŠB-TUO stane tzv. poskytovatelem regulované služby v režimu vyšších povinností. VŠB-TUO bude následně mj. z pozice zadavatele povinna vyhodnotit možný dopad rizik a následně přiměřeně aplikovat doporučení NÚKIB. S ohledem na předběžnou analýzu rizik vyhotovenou ze strany IT4Innovations je nanejvýš pravděpodobné, že dojde z naší strany k zákazu dodávek technologií vybraných čínských výrobců při zadávání relevantních veřejných zakázek vč dodávky clusteru HPCQC-AI.

**Zadavatel žádá, abyste tuto informaci případně zohlednili a/nebo okomentovali v odpovědích na dotazy vznesené v bodě 2 tohoto dokumentu. Zejména ve vztahu k dotazu č. 6.**

Page 4

## 4\. Další průběh PTK

Zadavatel již neplánuje organizaci dalšího kola PTK. V případě potřeby se na účastníky PTK obrátí individuálně pro vysvětlení doručených odpovědí na vznesené dotazy. Zadavatel předpokládá ukončení PTK v průběhu února 2026 a zahájení souvisejícího zadávacího řízení do konce Q1 2026.

_________________________ Ing. Jan Juřena ved. odd. VZ a právních služeb IT4Innovations
počet •GPU,
přesný •typ/modelGPU,
včetně klíčovýchparametrů:
06_PTK/Doplnujici_dotazy_PTK.docx 4 pages · 0 tables
<!-- PAGE 1 -->**1. Sada dotazů:**

V návaznosti na proběhnuvší jednání v PTK prosíme o zodpovězení dvou níže uvedených dotazů:

1. Uveďte prosím seznam DLC komponent ve Vámi navrhovaných variantách řešení, minimálně v granularitě celků typu: CPU, GPU, PSU, přepínače vysokorychlostní sítě, přepínače Ethernet sítě.
2. Jaký je Vámi očekávaný LINPACK výkon v FP64 na GPU kartách pro zvažované varianty nabízených řešení. Uveďte prosím v dané variantě počet a typ zvažovaných GPU pro uvedený odhad výkonu. 

**2. Sada dotazů**

Prosím o zodpovězení dalších doplňujících dotazů. Tentokrát se týkají podpůrné infrastruktury objektu. 

**Infrastruktura na datovém sále zadavatele má pevně dané provozní a technické parametry, které jsou limitujícím faktorem pro návrh systému dodavatele. Jakým způsobem bude dodavatel řešit tyto níže uvedené limitující parametry chlazení ve vazbě na počet přípojných bodů, průtočné množství a tlakovou ztrátu navrhovaného systému?** 

**Uvedené průtoky jsou minimálními hodnotami ve vazbě na celý chladicí okruh.**

**Pro ucelení informací upřednostňujeme dodání schématu připojení systému na chladicí okruhy zadavatele.** 

![Obsah obrázku text, dokument, snímek obrazovky, Písmo Obsah generovaný pomocí AI může být nesprávný.](media/image1.png)

**3. sada dotazů:**

Děkuji za zaslané informace a prosím o zodpovězení níže uvedeného dotazu, který má opět návaznost na podpůrnou infrastrukturu objektu. 

**Jaký odhadujete maximální příkon a odpovídající tepelný výkon navrhovaných systémů při aktuálních cenách IT technologií, námi daných finančních limitech a reálně dosažitelném počtu výpočetních nódů?**

Page 1

**1. Sada dotazů:**

V návaznosti na proběhnuvší jednání v PTK prosíme o zodpovězení dvou níže uvedených dotazů:

1. Uveďte prosím seznam DLC komponent ve Vámi navrhovaných variantách řešení, minimálně v granularitě celků typu: CPU, GPU, PSU, přepínače vysokorychlostní sítě, přepínače Ethernet sítě.
2. Jaký je Vámi očekávaný LINPACK výkon v FP64 na GPU kartách pro zvažované varianty nabízených řešení. Uveďte prosím v dané variantě počet a typ zvažovaných GPU pro uvedený odhad výkonu.

Page 2

Page 3

**2. Sada dotazů**

Prosím o zodpovězení dalších doplňujících dotazů. Tentokrát se týkají podpůrné infrastruktury objektu. 

**Infrastruktura na datovém sále zadavatele má pevně dané provozní a technické parametry, které jsou limitujícím faktorem pro návrh systému dodavatele. Jakým způsobem bude dodavatel řešit tyto níže uvedené limitující parametry chlazení ve vazbě na počet přípojných bodů, průtočné množství a tlakovou ztrátu navrhovaného systému? **

**Uvedené průtoky jsou minimálními hodnotami ve vazbě na celý chladicí okruh.**

**Pro ucelení informací upřednostňujeme dodání schématu připojení systému na chladicí okruhy zadavatele. **

![Obsah obrázku text, dokument, snímek obrazovky, Písmo

Obsah generovaný pomocí AI může být nesprávný.](image)

Page 4

**3. sada dotazů:**

Děkuji za zaslané informace a prosím o zodpovězení níže uvedeného dotazu, který má opět návaznost na podpůrnou infrastrukturu objektu. 

**Jaký odhadujete maximální příkon a odpovídající tepelný výkon navrhovaných systémů při aktuálních cenách IT technologií, námi daných finančních limitech a reálně dosažitelném počtu výpočetních nódů?**

[{"source":"image_ocr","message":"Image 0 OCR failed: OCR error: Tesseract OCR failed: Image processing failed: Parsing error: Failed to decode image: The image format could not be determined"}]

06_PTK/vyzva/01_zakladni_pozadavky_zadavatele_VCIII_CLARA.docx 18 pages · 0 tables
<!-- PAGE 1 --> **„Výpočetní cluster VC III“ a „HPCQC – AI výpočetní cluster“ Základní požadavky zadavatele na předmět veřejné zakázky Obsah**

**Základní požadavky zadavatele na předmět veřejné zakázky**&#9;1

1&#9;Úvod&#9;1

2&#9;Parametry zakázky&#9;1

3&#9;Záměr&#9;2

4&#9;Výpočetní cluster VC III&#9;2

4.1&#9;Komponenty&#9;3

4.2&#9;Řešení superpočítače&#9;4

4.3&#9;Požadavky&#9;5

5&#9;HPCQC – AI výpočetní cluster&#9;8

5.1&#9;Komponenty&#9;8

5.2&#9;Řešení superpočítače&#9;10

5.3&#9;Požadavky&#9;11

6&#9;Rozsah zakázky&#9;14

7&#9;Závazný obsah Návrhu&#9;14

8&#9;Požadavky na záruku a servisní služby&#9;16

9&#9;Infrastruktura zadavatele&#9;17

9.1&#9;Datové centrum&#9;17

9.2&#9;WAN síť&#9;18

9.3&#9;Storage síť&#9;18

## Úvod

Obsahem tohoto dokumentu jsou informace pro dvě připravované veřejné zakázky „**Výpočetní cluster VC III“ a** „**HPCQC – AI výpočetní cluster“,** předběžné požadavky na rozsah, požadované vlastnosti, parametry a funkcionality.

***Všechny požadavky a parametry uvedené v tomto dokumentu jsou předběžné.***

## Parametry zakázky

Předpokládaný termín realizace zakázky je rok 2026.

Předpokládaná hodnota navazujícího zadávacího řízení „**Výpočetní cluster VC III“** je 195 500 000 Kč bez DPH.

Předpokládaná hodnota navazujícího zadávacího řízení „**HPCQC – AI výpočetní cluster“** je 177 000 000 Kč bez DPH.

Zakázka „**Výpočetní cluster VC III“** je financována z prostředků operačního programu Jan Amos Komenský (OP JAK), projekt Modernizace e-INFRA CZ II (CZ.02.01.01/00/23_016/0008329) a vlastních prostředků.

Zakázka „**HPCQC – AI výpočetní cluster“** je financována z prostředků operačního programu Jan Amos Komenský (OP JAK), projekt Centrum pro umělou inteligenci a kvantové výpočty v systémovém výzkumu mozku (registrační číslo: CZ.02.01.01/00/23_029/0008437), akronym CLARA, a z vlastních zdrojů

Zadavatel předpokládá, že v rámci hodnocení stanoví pevnou cenu a bude hodnotit pouze kvalitu nabízeného plnění. V rámci kritérií kvality bude hodnocena zejména technická úroveň řešení s důrazem na hodnotu výpočetního výkonu.

## Záměr

Záměrem zadavatele je modernizace a posílení kapacit ICT infrastruktury Národního superpočítačového centra IT4Innovations.

V rámci modernizace a posílení kapacit ICT infrastruktury centra budou pořízeny, instalovány a zpřístupněny uživatelům centra superpočítače pro řešení nejnáročnějších vědeckých a inženýrských výpočetních úloh. Tyto nové superpočítače postupně nahradí stávající superpočítač Karolína a dále poslouží vědeckým cílům projektu CLARA.

V roce 2026 budou realizovány oba superpočítače, kde superpočítač VC III nahradí v tom čase již morálně zastaralý stávající superpočítač Karolína. Superpočítač VC III bude výkonem převyšovat stávající superpočítač Karolína a bude používat v době realizace nejmodernější technologie. Hlavním cílem je poskytnout moderní technologie uživatelům centra pro široké spektrum úloh, od tradičních HPC simulací až po nejmodernější úlohy z oblasti umělé inteligence (AI). **Realizace superpočítače VC III je předmětem této veřejné zakázky.**

Ve stejném roce dojde taktéž k instalaci nového superpočítače HPCQC – AI výpočetní cluster, který bude primárně sloužit potřebám projektu CLARA, který je zaměřen na výzkum neurodegenerativních onemocnění mozku. **Realizace HPCQC – AI výpočetní clusteru je předmětem této veřejné zakázky.**

Ačkoliv z technického hlediska mohou být výsledná řešení do jisté míry podobná, bude každý výpočetní systém pořizován na základě samostatného zadávacího řízení, jelikož se jedná o dva samostatné funkční celky.

Oba superpočítače budou využívány taktéž k simulacím kvantových počítačů jakožto doplnění a předstupeň kvantového počítače VLQ, konsorcia LUMI-Q, který je instalován a provozován v datovém centru IT4Innovations (tedy stejném jako předchozí i nově pořizované superpočítače).

Nově realizované superpočítače VC III a HPCQC – AI výpočetní cluster budou integrovány do infrastruktury superpočítačového centra IT4Innovations, budou instalovány na datovém sále zadavatele, budou integrovány do síťové infrastruktury zadavatele a budou zpřístupňovat centralizovaná úložiště zadavatele.

Pozn. V textu jsou uváděny rychlosti a kapacity za použití dekadických jednotek (násobky deseti), pokud není explicitně uvedena binární jednotka (např. KiB, MiB).

## Výpočetní cluster VC III

Pro superpočítač VC III jsou v současné době na straně zadavatele zajištěny prostředky financování z národních zdrojů (OP JAK) ve výši 195 500 000 Kč bez DPH. 

### Komponenty

Superpočítač je komplexní systém sestávající z výpočetních, úložných, síťových a dalších systémů a softwarového řešení určený pro provádění náročných výpočtů (HPC).

![A diagram of a project Description automatically generated](media/image1.png)

Obrázek 1 Orientační schéma řešení superpočítače VC III

**Výpočetní cluster** je tvořen **Výpočetními servery** propojenými **Výpočetní sítí** – vysokorychlostní sítí s nízkou latencí. Výpočetní cluster je určen pro provádění výpočetních úloh uživatelů. Výpočetní servery poskytují výpočetní výkon, Výpočetní síť umožňuje rychlou komunikaci mezi servery a efektivní provádění paralelních úloh. Pro servery clusteru je dále používáno též označení uzel.

**Přístupové servery** *–* servery sloužící pro přístup uživatelů, pro přípravu úloh a dat, kompilaci a ladění kódů, pro zpracování výsledků a pro přenos dat.

**Úložiště** slouží k ukládání a sdílení dat. Úložiště jsou realizována jako komplexní řešení úložných zařízení, I/O serverů (např. souborových serverů), datových sítí a potřebného softwarového vybavení na straně serverů i klientů. Úložiště poskytující souborové služby jsou označována jako **Souborová úložiště**.

IT4Innovations strukturuje uživatelská úložiště výpočetních clusterů takto:

- úložiště HOME – souborové úložiště pro uživatelská nastavení operačního systému a aplikací na superpočítači
- úložiště SCRATCH – souborové úložiště pro krátkodobá data uživatelů, intenzivně používaná výpočetními uzly superpočítače
- úložiště PROJECT – souborové úložiště pro střednědobá a dlouhodobá projektová data uživatelů, sdílená mezi superpočítači IT4Innovations (existující úložiště zadavatele, není součástí zakázky)

**Úložiště** infrastruktury je určeno pro ukládání a sdílení dat infrastruktury superpočítače, tj. pro uložení systémových obrazů (image) serverů, logů, dat infrastrukturních služeb, uživatelského aplikačního vybavení, plánovače atd.

**Infrastrukturní a management servery** jsou určené pro správu superpočítače, zdrojů, úloh, licencí a poskytování infrastrukturních služeb (např. DHCP, DNS, LDAP, licenční servery, plánovače, monitoring, logování atd.), zdrojů.

Řešení **Zálohování** zajišťuje ochranu dat před úplnou ztrátou v případě vážného selhání primárního úložiště dat, chyby apod.

Superpočítač obsahuje **Síťovou infrastrukturu,** tj. síťové propojení komponent, systémů tak, aby bylo dosaženo požadované funkcionality, byl zajištěn přístup na jednotlivé služby, byl zajištěn výkon, dostupnost a bezpečnost.

Síťovou infrastrukturu tvoří zejména Výpočetní síť, LAN síť, integrace do WAN sítě zadavatele, integrace do storage sítě zadavatele a případně další sítě (například datové sítě SAN) dle návrhu dodavatele*.*

**Výpočetní síť** propojuje výpočetní servery, přístupové servery, je použita pro zpřístupnění některých úložišť.

**LAN síť** zajišťuje komunikaci mezi zařízeními uvnitř superpočítače, slouží ke správě systému, poskytování infrastrukturních služeb atp.

**Integrace do WAN sítě** zadavatele zajišťuje propojení do WAN sítě zadavatele a zprostředkovaně služby internetu v superpočítači.

**Integrace do storage sítě** zadavatele zajišťuje propojení do storage sítě zadavatele, kde jsou připojena centralizovaná úložiště zadavatele (např. úložiště PROJECT), tak aby byla zajištěna dostupnost úložišť na uzlech superpočítače. Integrace je obvykle realizována síťovými branami realizujícími propojení storage sítě zadavatele (100 Gb/s Ethernet) a výpočetní sítě clusteru.

**Infrastrukturu pro provoz v datovém centru** tvoří. zejména racky potřebné pro umístění zařízení, řešení chlazení zařízení superpočítače, napájení, rozhraní a napojení na infrastrukturu datového centra.

**Softwarové vybavení** je nezbytnou součástí řešení superpočítače. Softwarové vybavení zahrnuje mj. operační systémy všech serverů, firmware a ovladače hardware, knihovny, infrastrukturní software, software pro realizaci výpočetního prostředí superpočítače a výpočetní aplikace.

### Řešení superpočítače

Řešení superpočítače musí umožňovat efektivní provádění mnoha současných výpočetních úloh všech fází životního cyklu úloh (příprava, výpočet, zpracování výsledků) různého typu (paralelní, sériové; dávkové, interaktivní) mnoha uživatelů, bude zajišťovat bezpečné uložení dat uživatelů a rychlý přístup k datům, efektivní správu systému, komponent, zdrojů a uživatelů.

Řešení musí poskytovat transparentní, jednotné, sdílené uživatelské prostředí a jednotný přístup k výpočetním zdrojům.

Redundance řešení musí být v takovém rozsahu, aby při selhání fyzické komponenty nedošlo k významnému omezení poskytování služeb (aby neselhala klíčová služba nutná pro běh řešení) nebo aby nedošlo ke ztrátě důležitých dat. Zabezpečení významných dat bude dále zajištěno zálohováním.

Všechny servery řešení budou umožňovat vzdálenou správu nezávislou na běhu operačního systému.

Řešení musí umožňovat efektivní provoz a nízké provozní náklady.

Superpočítač VC III bude obsahovat tyto komponenty:

- **Výpočetní servery** 
- **Výpočetní síť**
- **Přístupové servery**
- **Úložiště HOME**
- **Úložiště SCRATCH**
- **Úložiště infrastruktury**
- **Infrastrukturní a management servery**
- **Zálohování**
- **Síťová infrastruktura**
  - **LAN síť**
  - **Integrace do WAN sítě** 
  - **Integraci do storage sítě**
- **Infrastruktura pro provoz v datovém centru**
- **Softwarové vybavení**

### Požadavky

#### Výpočetní servery

- minimálně 110 výpočetních serverů
- architektura x86_64, nebo ARM
- OS Linux
- jeden nebo dva procesory na výpočetní server
- minimálně 960 GB standardní paměti DDR RAM na výpočetní server
- min. 450 GB/s propustnost do paměti CPU/socket
- min. čtyři GPU akcelerátory
- výkon min. 4000 TFlop/s na server v FP32 (tensorflow/sparsity AI maximální teoretický výkon)
- minimálně 2 NIC pro vysokorychlostní síť s agregovanou šířkou pásma min. 800 Gb/s
- chlazení pomocí DLC, celkově min. 90% tepla do vody o vstupní teplotě min. 38 °C

#### Přístupové servery

- 2 přístupové (login) servery
- CPU, GPU a paměť serveru – shodná konfigurace jako u výpočetních serverů

#### Úložiště SCRATCH

Úložiště SCRATCH slouží pro uložení krátkodobých dat uživatelů, data jsou obvykle intenzivně používaná výpočetními uzly superpočítače.

- Úložiště SCRATCH bude mít čistou kapacitu minimálně 2PB, propustnost minimálně 1000 GB/s a bude těsně (s vysokou propustností a s nízkou latencí) připojeno na všechny uživatelsky dostupné uzly (výpočetní, přístupové).
- Předpokládáme použití technologie SSD disků (technologie NVMe) pro zajištěné vysoké propustnosti a I/O výkonu (5000 kIOPS).
- Jako souborový systém bude použit vysoce výkonný paralelní clusterový souborový systém „enterprise“ kvality, zajišťující kromě vysokého výkonu i vysokou bezpečnost přístupu k datům ve sdíleném prostředí.

#### Výpočetní síť

- Výpočetní síť bude mít rychlost portu minimálně 400Gb/s a latenci menší než 10 mikrosekund.
- Topologie sítě musí poskytovat neblokující ostrovy výpočetních uzlů o velikosti minimálně 32 uzlů.
- Síť musí podporovat hardwarovou akceleraci MPI komunikace.
- Síť musí podporovat IP protokol. 
- Síť musí být vhodná a podporovaná pro řešení úložiště SCRATCH.

#### Úložiště HOME

Úložiště HOME slouží pro uložení uživatelských nastavení operačního systému a aplikací v rámci superpočítače, předpokládáme tedy potřebu relativně nízké kapacity, přiměřené propustnosti a výkonu.

- Úložiště HOME bude mít čistou kapacitu minimálně 25TB a bude sdíleno na všechny uživatelsky dostupné uzly (výpočetní, přístupové).
- Úložiště bude postaveno na SSD discích.
- Předpokládáme použití technologie NFS s vysokou dostupností (HA).

#### Úložiště infrastruktury

Úložiště infrastruktury je určeno pro ukládání a sdílení dat infrastruktury superpočítače, tj. pro uložení systémových obrazů (image) serverů, logů, dat infrastrukturních služeb, uživatelského aplikačního vybavení, plánovače atd.

Úložiště bude mít čistou kapacitu minimálně 25TB.

Úložiště bude postaveno na SSD discích.

Konfigurace bude v režimu redundance/vysoké dostupnosti minimálně na úrovni disků, řadičů diskového pole, připojení k serverům a souborových serverů.

Úložiště infrastruktury bude připojeno k serverům (přímo či vhodnou sítí) blokovým způsobem anebo pomocí síťového souborového systému (např. NFS). Předpokládané použití ze strany zadavatele:

- APPS – aplikační software sdílený pomocí NFS na všechny uživatelsky dostupné servery

Pro realizaci úložiště infrastruktury a úložiště HOME lze použít jedno společné diskového pole.

#### Infrastrukturní a management servery

Systém bude obsahovat minimálně dva fyzické servery pro infrastrukturní služby a management výpočetního systému. Klíčové infrastrukturní služby budou realizovány v konfiguraci vysoké dostupnosti (HA).

Několik infrastrukturních serverů (předpokládaný počet cca 5ks) bude určeno pro běh služeb zadavatele.

Preferujeme – v případě použití malého počtu fyzických serverů – oddělení služeb na virtuální servery (použití serverové virtualizace).

#### Zálohování

Zálohování bude poskytovat zabezpečení dat infrastrukturních a management serverů, úložiště infrastruktury a úložiště HOME.

Zálohování bude řešeno bez využití pásek (na diskové úložiště) a bude využívat technologii pro vyšší efektivitu uložení dat (např. kompresi nebo deduplikaci). Zálohování bude využívat vyhrazené, nezávislé úložiště dat.

#### LAN síť

LAN síť bude zajišťovat komunikaci mezi zařízeními uvnitř superpočítače a poskytovat připojení do WAN sítě IT4Innovations.

LAN síť bude obsahovat veřejné a privátní části sítě. 

Veřejné části sítě (dále jen veřejné sítě), ve kterých budou použity veřejné IPv4 a IPv6 adresy, budou sloužit pro poskytování služeb dostupných z internetu. 

Privátní části sítě (dále jen privátní sítě), ve kterých budou použity privátní IPv4 adresy, budou sloužit pro vnitřní služby a pro management zařízení.

Bude zajištěna konektivita výpočetních serverů do LAN sítě a internetu.

Zařízením v privátních sítích musí být umožněn přístup do internetu přes NAT.

LAN síť bude rozdělena do různých L3 sítí. Pro každou L3 síť bude použita jiná L2 síť (VLAN nebo jiný aktivní prvek). Je nežádoucí používat jednu L2 síť pro více L3 sítí. Rozdělení sítí bude zajišťovat zejména oddělení těchto provozů:

- služby dostupné z internetu
- datová komunikace mezi servery (služby)
- management síťových aktivních prvků
- management diskových polí a storage zařízení
- management serverů (BMC, IPMI, apod.)
- management non-IT infrastruktury (napájení, chlazení apod.)

LAN síť nezbytná pro propojení přístupových serverů do WAN sítě bude řešena redundantními prvky. Aktivní prvky sítě budou vzdáleně řízené a centrálně spravovatelné.

#### Integrace do WAN sítě

Součástí zakázky je připojení do WAN sítě zadavatele.

Připojení do WAN sítě zadavatele musí poskytovat konektivitu min. 2x100 Gb/s, pro připojení jsou vyhrazeny dva porty QSFP28 na prvcích WAN sítě zadavatele.

#### Integrace do storage sítě

Součástí zakázky je připojení do storage sítě zadavatele. Pro realizaci se předpokládá použití minimálně dvou vyhrazených serverů implementujících síťové brány mezi storage sítí zadavatele (na technologii 100Gb/s Ethernet) a výpočetní sítí clusteru

Připojení do storage sítě zadavatele musí poskytovat konektivitu min. 2x100 Gb/s, pro připojení jsou vyhrazeny dva porty QSFP28 na prvcích storage sítě zadavatele.

#### Softwarové vybavení

Požadovanou součástí řešení superpočítače je softwarové vybavení.

Softwarové vybavení zahrnuje operační systémy všech serverů, firmware a ovladače hardware, systémové, komunikační a další knihovny, infrastrukturní software a software pro realizaci výpočetního prostředí superpočítače.

Infrastrukturní software a software pro realizaci výpočetního prostředí superpočítače zahrnuje software pro správu a provisioning serverů/clusteru, management software zařízení, software řešení datových úložišť a bran, sdílené a/nebo clusterové, paralelní souborové systémy, software infrastrukturních služeb, zálohovací software, software pro serverovou virtualizace (bude-li použita v řešení), software pro monitoring infrastruktury, sběr a analýza logů, optimalizovaný softwarový stack pro komunikaci ve výpočetní síti, optimalizované MPI a další.

Předpokládáme použití OS Linux na všech serverech řešení superpočítače.

Na clusteru bude provozován plánovač úloh Slurm.

#### Bezpečnost

Vzhledem k otevřenému charakteru centra IT4Innovations, které poskytuje služby širokému spektru uživatelů, usilujeme o bezpečnost našich systémů. IT4Innovations je držitelem certifikátů systému managementu bezpečnosti informací podle normy ISO 27001 (ISO/IEC 27001:2013, ČSN ISO/IEC 27001:2014). Preferuje použití operačního systému a softwarového vybavení s dobrou dostupností bezpečnostních aktualizací a jejich rychlou aplikaci. Dostupnost bezpečnostních aktualizací by měla být zajištěna po celou dobu provozování celého komplexního softwarového stacku.

#### Identity management

IT4Innovations provádí centralizovanou správu všech uživatelů centra. Informace o uživatelích jsou propagovány/synchronizovány z centrální repository na všechny provozované systémy/superpočítače. Realizace uživatelských účtů superpočítače bude používat technologie LDAP a SSSD. Účty uživatelů budou uloženy a spravovány v LDAP databázi. Pro realizaci uživatelských účtů a skupin budou použita LDAP schémata posixAccount a posixGroup. Správa uživatelských účtů a skupin bude realizována zabezpečeným protokolem LDAP. Správu uživatelských účtů a skupin bude realizovat výhradně zadavatel.

## HPCQC – AI výpočetní cluster

### Komponenty

Superpočítač je komplexní systém sestávající z výpočetních, úložných, síťových a dalších systémů a softwarového řešení určený pro provádění náročných výpočtů (HPC).

![A diagram of a project Description automatically generated](media/image10.png)

Obrázek 1 Orientační schéma řešení superpočítače VC III

**Výpočetní cluster** je tvořen **Výpočetními servery** propojenými **Výpočetní sítí** – vysokorychlostní sítí s nízkou latencí. Výpočetní cluster je určen pro provádění výpočetních úloh uživatelů. Výpočetní servery poskytují výpočetní výkon, Výpočetní síť umožňuje rychlou komunikaci mezi servery a efektivní provádění paralelních úloh. Pro servery clusteru je dále používáno též označení uzel.

**Přístupové servery** *–* servery sloužící pro přístup uživatelů, pro přípravu úloh a dat, kompilaci a ladění kódů, pro zpracování výsledků a pro přenos dat.

**Úložiště** slouží k ukládání a sdílení dat. Úložiště jsou realizována jako komplexní řešení úložných zařízení, I/O serverů (např. souborových serverů), datových sítí a potřebného softwarového vybavení na straně serverů i klientů. Úložiště poskytující souborové služby jsou označována jako **Souborová úložiště**.

IT4Innovations strukturuje uživatelská úložiště výpočetních clusterů takto:

- úložiště HOME – souborové úložiště pro uživatelská nastavení operačního systému a aplikací na superpočítači
- úložiště SCRATCH – souborové úložiště pro krátkodobá data uživatelů, intenzivně používaná výpočetními uzly superpočítače
- úložiště PROJECT – souborové úložiště pro střednědobá a dlouhodobá projektová data uživatelů, sdílená mezi superpočítači IT4Innovations (existující úložiště zadavatele, není součástí zakázky)

**Úložiště** infrastruktury je určeno pro ukládání a sdílení dat infrastruktury superpočítače, tj. pro uložení systémových obrazů (image) serverů, logů, dat infrastrukturních služeb, uživatelského aplikačního vybavení, plánovače atd.

**Infrastrukturní a management servery** jsou určené pro správu superpočítače, zdrojů, úloh, licencí a poskytování infrastrukturních služeb (např. DHCP, DNS, LDAP, licenční servery, plánovače, monitoring, logování atd.), zdrojů.

Řešení **Zálohování** zajišťuje ochranu dat před úplnou ztrátou v případě vážného selhání primárního úložiště dat, chyby apod.

Superpočítač obsahuje **Síťovou infrastrukturu,** tj. síťové propojení komponent, systémů tak, aby bylo dosaženo požadované funkcionality, byl zajištěn přístup na jednotlivé služby, byl zajištěn výkon, dostupnost a bezpečnost.

Síťovou infrastrukturu tvoří zejména Výpočetní síť, LAN síť, integrace do WAN sítě zadavatele, integrace do storage sítě zadavatele a případně další sítě (například datové sítě SAN) dle návrhu dodavatele*.*

**Výpočetní síť** propojuje výpočetní servery, přístupové servery, je použita pro zpřístupnění některých úložišť.

**LAN síť** zajišťuje komunikaci mezi zařízeními uvnitř superpočítače, slouží ke správě systému, poskytování infrastrukturních služeb atp.

**Integrace do WAN sítě** zadavatele zajišťuje propojení do WAN sítě zadavatele a zprostředkovaně služby internetu v superpočítači.

**Integrace do storage sítě** zadavatele zajišťuje propojení do storage sítě zadavatele, kde jsou připojena centralizovaná úložiště zadavatele (např. úložiště PROJECT), tak aby byla zajištěna dostupnost úložišť na uzlech superpočítače. Integrace je obvykle realizována síťovými branami realizujícími propojení storage sítě zadavatele (100 Gb/s Ethernet) a výpočetní sítě clusteru.

**Infrastrukturu pro provoz v datovém centru** tvoří. zejména racky potřebné pro umístění zařízení, řešení chlazení zařízení superpočítače, napájení, rozhraní a napojení na infrastrukturu datového centra.

**Softwarové vybavení** je nezbytnou součástí řešení superpočítače. Softwarové vybavení zahrnuje mj. operační systémy všech serverů, firmware a ovladače hardware, knihovny, infrastrukturní software, software pro realizaci výpočetního prostředí superpočítače a výpočetní aplikace.

### Řešení superpočítače

Řešení superpočítače musí umožňovat efektivní provádění mnoha současných výpočetních úloh všech fází životního cyklu úloh (příprava, výpočet, zpracování výsledků) různého typu (paralelní, sériové; dávkové, interaktivní) mnoha uživatelů, bude zajišťovat bezpečné uložení dat uživatelů a rychlý přístup k datům, efektivní správu systému, komponent, zdrojů a uživatelů.

Řešení musí poskytovat transparentní, jednotné, sdílené uživatelské prostředí a jednotný přístup k výpočetním zdrojům.

Redundance řešení musí být v takovém rozsahu, aby při selhání fyzické komponenty nedošlo k významnému omezení poskytování služeb (aby neselhala klíčová služba nutná pro běh řešení) nebo aby nedošlo ke ztrátě důležitých dat. Zabezpečení významných dat bude dále zajištěno zálohováním.

Všechny servery řešení budou umožňovat vzdálenou správu nezávislou na běhu operačního systému.

Řešení musí umožňovat efektivní provoz a nízké provozní náklady.

Superpočítač HPCQC – AI bude obsahovat tyto komponenty:

- **Výpočetní servery** 
- **Výpočetní síť**
- **Přístupové servery**
- **Úložiště HOME**
- **Úložiště SCRATCH**
- **Úložiště infrastruktury**
- **Infrastrukturní a management servery**
- **Zálohování**
- **Síťová infrastruktura**
  - **LAN síť**
  - **Integrace do WAN sítě** 
  - **Integraci do storage sítě**
- **Infrastruktura pro provoz v datovém centru**
- **Softwarové vybavení**

### Požadavky

#### Výpočetní servery

- minimálně 100 výpočetních serverů
- architektura x86_64, nebo ARM
- OS Linux
- jeden nebo dva procesory na výpočetní server
- minimálně 960 GB standardní paměti DDR RAM na výpočetní server
- min. 450 GB/s propustnost do paměti CPU/socket
- min. čtyři GPU akcelerátory
- výkon min. 4000 TFlop/s na server v FP32 (tensorflow/sparsity AI maximální teoretický výkon)
- minimálně 2 NIC pro vysokorychlostní síť s agregovanou šířkou pásma min. 800 Gb/s
- chlazení pomocí DLC, celkově min. 90% tepla do vody o vstupní teplotě min. 38 °C

#### Přístupové servery

- 2 přístupové (login) servery
- CPU, GPU a paměť serveru – shodná konfigurace jako u výpočetních serverů

#### Úložiště SCRATCH

Úložiště SCRATCH slouží pro uložení krátkodobých dat uživatelů, data jsou obvykle intenzivně používaná výpočetními uzly superpočítače.

- Úložiště SCRATCH bude mít čistou kapacitu minimálně 2PB, propustnost minimálně 1000 GB/s a bude těsně (s vysokou propustností a s nízkou latencí) připojeno na všechny uživatelsky dostupné uzly (výpočetní, přístupové).
- Předpokládáme použití technologie SSD disků (technologie NVMe) pro zajištěné vysoké propustnosti a I/O výkonu (5000 kIOPS).
- Jako souborový systém bude použit vysoce výkonný paralelní clusterový souborový systém „enterprise“ kvality, zajišťující kromě vysokého výkonu i vysokou bezpečnost přístupu k datům ve sdíleném prostředí.

#### Výpočetní síť

- Výpočetní síť bude mít rychlost portu minimálně 400Gb/s a latenci menší než 10 mikrosekund.
- Topologie sítě musí poskytovat neblokující ostrovy výpočetních uzlů o velikosti minimálně 32 uzlů.
- Síť musí podporovat hardwarovou akceleraci MPI komunikace.
- Síť musí podporovat IP protokol. 
- Síť musí být vhodná a podporovaná pro řešení úložiště SCRATCH.

#### Úložiště HOME

Úložiště HOME slouží pro uložení uživatelských nastavení operačního systému a aplikací v rámci superpočítače, předpokládáme tedy potřebu relativně nízké kapacity, přiměřené propustnosti a výkonu.

- Úložiště HOME bude mít čistou kapacitu minimálně 25TB a bude sdíleno na všechny uživatelsky dostupné uzly (výpočetní, přístupové).
- Úložiště bude postaveno na SSD discích.
- Předpokládáme použití technologie NFS s vysokou dostupností (HA).

#### Úložiště infrastruktury

Úložiště infrastruktury je určeno pro ukládání a sdílení dat infrastruktury superpočítače, tj. pro uložení systémových obrazů (image) serverů, logů, dat infrastrukturních služeb, uživatelského aplikačního vybavení, plánovače atd.

Úložiště bude mít čistou kapacitu minimálně 25TB.

Úložiště bude postaveno na SSD discích.

Konfigurace bude v režimu redundance/vysoké dostupnosti minimálně na úrovni disků, řadičů diskového pole, připojení k serverům a souborových serverů.

Úložiště infrastruktury bude připojeno k serverům (přímo či vhodnou sítí) blokovým způsobem anebo pomocí síťového souborového systému (např. NFS). Předpokládané použití ze strany zadavatele:

- APPS – aplikační software sdílený pomocí NFS na všechny uživatelsky dostupné servery

Pro realizaci úložiště infrastruktury a úložiště HOME lze použít jedno společné diskového pole.

#### Infrastrukturní a management servery

Systém bude obsahovat minimálně dva fyzické servery pro infrastrukturní služby a management výpočetního systému. Klíčové infrastrukturní služby budou realizovány v konfiguraci vysoké dostupnosti (HA).

Několik infrastrukturních serverů (předpokládaný počet cca 5ks) bude určeno pro běh služeb zadavatele.

Preferujeme – v případě použití malého počtu fyzických serverů – oddělení služeb na virtuální servery (použití serverové virtualizace).

#### Zálohování

Zálohování bude poskytovat zabezpečení dat infrastrukturních a management serverů, úložiště infrastruktury a úložiště HOME.

Zálohování bude řešeno bez využití pásek (na diskové úložiště) a bude využívat technologii pro vyšší efektivitu uložení dat (např. kompresi nebo deduplikaci). Zálohování bude využívat vyhrazené, nezávislé úložiště dat.

#### LAN síť

LAN síť bude zajišťovat komunikaci mezi zařízeními uvnitř superpočítače a poskytovat připojení do WAN sítě IT4Innovations.

LAN síť bude obsahovat veřejné a privátní části sítě. 

Veřejné části sítě (dále jen veřejné sítě), ve kterých budou použity veřejné IPv4 a IPv6 adresy, budou sloužit pro poskytování služeb dostupných z internetu. 

Privátní části sítě (dále jen privátní sítě), ve kterých budou použity privátní IPv4 adresy, budou sloužit pro vnitřní služby a pro management zařízení.

Bude zajištěna konektivita výpočetních serverů do LAN sítě a internetu.

Zařízením v privátních sítích musí být umožněn přístup do internetu přes NAT.

LAN síť bude rozdělena do různých L3 sítí. Pro každou L3 síť bude použita jiná L2 síť (VLAN nebo jiný aktivní prvek). Je nežádoucí používat jednu L2 síť pro více L3 sítí. Rozdělení sítí bude zajišťovat zejména oddělení těchto provozů:

- služby dostupné z internetu
- datová komunikace mezi servery (služby)
- management síťových aktivních prvků
- management diskových polí a storage zařízení
- management serverů (BMC, IPMI, apod.)
- management non-IT infrastruktury (napájení, chlazení apod.)

LAN síť nezbytná pro propojení přístupových serverů do WAN sítě bude řešena redundantními prvky. Aktivní prvky sítě budou vzdáleně řízené a centrálně spravovatelné.

#### Integrace do WAN sítě

Součástí zakázky je připojení do WAN sítě zadavatele.

Připojení do WAN sítě zadavatele musí poskytovat konektivitu min. 2x100 Gb/s, pro připojení jsou vyhrazeny dva porty QSFP28 na prvcích WAN sítě zadavatele.

#### Integrace do storage sítě

Součástí zakázky je připojení do storage sítě zadavatele. Pro realizaci se předpokládá použití minimálně dvou vyhrazených serverů implementujících síťové brány mezi storage sítí zadavatele (na technologii 100Gb/s Ethernet) a výpočetní sítí clusteru

Připojení do storage sítě zadavatele musí poskytovat konektivitu min. 2x100 Gb/s, pro připojení jsou vyhrazeny dva porty QSFP28 na prvcích storage sítě zadavatele.

#### Softwarové vybavení

Požadovanou součástí řešení superpočítače je softwarové vybavení.

Softwarové vybavení zahrnuje operační systémy všech serverů, firmware a ovladače hardware, systémové, komunikační a další knihovny, infrastrukturní software a software pro realizaci výpočetního prostředí superpočítače.

Infrastrukturní software a software pro realizaci výpočetního prostředí superpočítače zahrnuje software pro správu a provisioning serverů/clusteru, management software zařízení, software řešení datových úložišť a bran, sdílené a/nebo clusterové, paralelní souborové systémy, software infrastrukturních služeb, zálohovací software, software pro serverovou virtualizace (bude-li použita v řešení), software pro monitoring infrastruktury, sběr a analýza logů, optimalizovaný softwarový stack pro komunikaci ve výpočetní síti, optimalizované MPI a další.

Předpokládáme použití OS Linux na všech serverech řešení superpočítače.

Na clusteru bude provozován plánovač úloh Slurm.

#### Bezpečnost

Vzhledem k otevřenému charakteru centra IT4Innovations, které poskytuje služby širokému spektru uživatelů, usilujeme o bezpečnost našich systémů. IT4Innovations je držitelem certifikátů systému managementu bezpečnosti informací podle normy ISO 27001 (ISO/IEC 27001:2013, ČSN ISO/IEC 27001:2014). Preferuje použití operačního systému a softwarového vybavení s dobrou dostupností bezpečnostních aktualizací a jejich rychlou aplikaci. Dostupnost bezpečnostních aktualizací by měla být zajištěna po celou dobu provozování celého komplexního softwarového stacku.

#### Identity management

IT4Innovations provádí centralizovanou správu všech uživatelů centra. Informace o uživatelích jsou propagovány/synchronizovány z centrální repository na všechny provozované systémy/superpočítače. Realizace uživatelských účtů superpočítače bude používat technologie LDAP a SSSD. Účty uživatelů budou uloženy a spravovány v LDAP databázi. Pro realizaci uživatelských účtů a skupin budou použita LDAP schémata posixAccount a posixGroup. Správa uživatelských účtů a skupin bude realizována zabezpečeným protokolem LDAP. Správu uživatelských účtů a skupin bude realizovat výhradně zadavatel.

## Rozsah zakázky

Součástí zakázky je:

- komplexní implementace celého systému v datovém centru zadavatele (doprava, integrace do datového centra, instalace, konfigurace, ladění, testování, likvidace obalů)

- příprava a provedení akceptačních testů pro prokázání funkčnosti, vlastností a parametrů díla
- zaškolení obsluhy (školení)
- poskytování servisu, podpory a provádění pravidelných sw upgradů po dobu záruční doby
- konzultace v průběhu provozu řešení

## Závazný obsah Návrhu

Návrh musí obsahovat tyto informace:

1. **Návrh technického řešení** 

- návrh hardwarového řešení
  - uvedení zvažovaných komponent, jejich počty, názvy výrobců a modelů
- návrh softwarového řešení
  - uvedení zvažovaného SW vybavení, názvy výrobců, produktů a verzí
- výkonové a kapacitní parametry řešení
  - výpočetní výkon v FP64 a FP32 na úrovni komponent i agregovaný
  - paměťová propustnost
  - výkon úložných zařízení (jak agregovaná propustnost, tak výkon IOPS)
- energetická náročnost řešení 
  - specifikace proudového připojení [A]
- popis chlazení systému
  - rámcové uvedení kapacity [kW] odvodu tepla do okruhů s teplou a studenou vodou
  - uvedení souladu návrhu chlazení s technickými parametry chladících okruhů, především objemu průtoků a způsobených tlakových ztrát při chlazení plně zatíženého systému kapalinou o teplotě 38°C v okruhu zadavatele a s chemickým složením uvedeným v popisu vlastností datového sálu (směs voda/glykol)
  - v případě nesouladu řešení s vlastnostmi chladících okruhů prosím uveďte možnosti jak chlazení zajistit, ať již snížením teploty chladící kapaliny, či snížení tlakových ztrát za pomocí snížení objemu průtoku chladící kapaliny v okruhu zadavatele
- prostorová náročnost řešení 
  - použité racky, zabraná plocha, plošná i bodová zátěž [kg/m2] na podlahovou plochu
- předpokládaná časová dostupnost navrhovaných technologií

*Zadavatel požaduje, aby každý z účastníků PTK ve svém návrhu potvrdil, že zvažovaná technická řešení jsou realizovatelná včetně jejich finální akceptace do konce října roku 2026.*

- popis funkcionality a vlastností řešení
  - Explicitní uvedení jakým způsobem lze na navrženém HW provozovat akcelerovaným způsobem kvantový simulátor. Je potřeba uvést produktový název SW, verzi a referenci využití ve výzkumné instituci nebo soukromé firmě

*Funkcionalita kvantového simulátoru bude mandatorním požadavkem u systému HPCQC – AI a proto je potřeba volit komponenty především výpočetní části tak, aby akceleraci umožňovala.* 

- spolehlivost a dostupnost řešení
- soulad technického řešení (především výkonových a kapacitních parametrů) a rozpočtu
  - v případě, že požadované kapacitní a výkonové parametry zadavatele přesahují předpokládaný rozpočet, uveďte, prosím, varianty řešení v původním požadovaném rozsahu a taktéž adekvátně redukovaný návrh s dodržením daného rozpočtu. Varianty s původními požadovanými parametry prosím označte jako „Původní varianta“ a redukovanou verzi jako „Redukovaná varianta“
  - dále prosíme o explicitní potvrzení adekvátního poměru výpočetního výkonu výpočetních uzlů a kapacit síťového připojení výpočetních uzlů do vysokorychlostní sítě za účelem zpracování náročných úloh z oblasti umělé inteligence jako např. trénování velkých jazykových modelů jak z pohledu komunikace při paralelním trénování, tak přístupu na úložiště SCRATCH
  - taktéž prosíme o explicitní potvrzení adekvátního poměru kapacit a výkonu výpočetní a SCRATCH úložné části, především tedy celkový výpočetní výkon k agregované propustnosti a agregovanému výkonu IOPS operací
  - v případě, že byste doporučili jiné kapacity v rámci vysokorychlostní sítě či kapacity a výkon úložiště SCRATCH, uveďte toto prosím jako samostatnou pod-variantu varianty Původní a/nebo Redukované s označením „Optimalizovaná varianta“
- návrh musí být k dispozici rovněž v elektronické formě umožňující editaci

1. **Návrh záruky a servisních služeb**

- reaktivní služby
- proaktivní služby

1. **Návrh licenčních podmínek** upravujících práva a závazky zadavatele k navrhovanému řešení
2. **Orientační cenová kalkulace navrhovaného řešení Výpočetního clusteru VC III / HPCQC – AI výpočetního clusteru** (indikativní nabídka) včetně rozkladu cen na logické a funkční celky a služby v členění minimálně:

Výpočetní servery, Výpočetní síť, Přístupové servery, Úložiště HOME, Úložiště SCRATCH, Úložiště infrastruktury, Infrastrukturní a management servery, Zálohování, LAN síť, Integrace do WAN sítě, Integrace do storage sítě, Racky, Chlazení, Softwarové vybavení, Slurm s podporou, Napojení na infrastrukturu DC, Implementace, Školení, Servisní služby.

Indikativní nabídka bude rovněž obsahovat výhled ohledně stability cen. Zadavatel cílí na možnost/vhodnost využit inflační doložku nebo vhodné mechanismy pro narovnání kritických cenových rozdílů v cenách vzniklých v průběhu plnění navazující veřejné zakázky.

## Požadavky na záruku a servisní služby

Zadavatel požaduje zohlednit následující parametry záruky a servisních služeb:

- záruční doba 5 let
- autorizovaný servis
- servis v místě instalace
- jediné kontaktní místo pro hlášení poruch
- možnost hlášení poruch a vad 24 hodin denně

Kategorie vad:

- Vada kategorie A – vada, která zcela nebo podstatným způsobem znemožňuje užívání superpočítače,
- Vada kategorie B – vada, která nebrání užívání superpočítače, ale podstatným způsobem jej omezuje, nebo která vytváří riziko znemožnění užívání superpočítače,
- Vada kategorie C – jiná vada, která není vadou kategorie A ani B

Zahájení řešení odstranění vady:

- Vada kategorie A – okamžitě po nahlášení vady
- Vada kategorie B – maximálně do 2 hodin od nahlášení vady
- Vada kategorie C – maximálně do 24 hodin od nahlášení vady

Odstranění vady:

- Vada kategorie A – do 24 hodin od nahlášení vady
- Vada kategorie B – do 72 hodin od nahlášení vady
- Vada kategorie C – do 7 pracovních dní od nahlášení vady

Za odstranění vady kategorie A nebo B lze považovat poskytnutí akceptovatelného náhradního řešení. Náhradní řešení vady kategorie A se považuje za nahlášenou vadu kategorie B a náhradní řešení vady kategorie B se považuje za nahlášenou vadu kategorie C; přípustné je jen to náhradní řešení, které skutečně umožňuje změnu kategorizace vady.

## Infrastruktura zadavatele

### Datové centrum

IT4Innovations národní superpočítačové centrum provozuje veškeré systémy ve svém datovém sále umístěném v budově IT4Innovations.

Datové centrum IT4Innovations disponuje redundantními zdroji zálohovaného napájení (dvě nezávislé napájecí větve, redundance 1+1) rozvodné soustavy 400/230 V;3+N+PE; 50 Hz; TN-S.

Datový sál o výměře 511 m2 poskytuje světlou výšku mezi systémovou podlahou a stropním podhledem 2.9 m.

#### Chlazení na datovém sále — současný stav

Chlazení pro datový sál poskytuje pět samostatných chladících kapalinových okruhů – dva okruhy teplé vody teploty a tři okruhy studené vody.

 

V datovém sále jsou ve zdvojené podlaze vyhotoveny tři větve z každého z pěti chladících okruhů. Na větvích jsou pro napojení technologie připraveny odbočky s bezúkapovými uzávěry DN65. Odbočky jsou umístěné pod technologickou podlahou datového sálu a jsou přístupné po vyjmutí některé z dlaždic technologické podlahy. V okruzích je použita směs 35% propylenglykol a 65% voda. 

 

Základní parametry chladících okruhů, včetně údajů pro připojení:

TV1 – okruh Teplé Vody – červený:

- Hydraulické zakončení: Victaulic UK 76,1
- Pracovní tlak: 4,5bar
- diferenční tlak pro datový sál: 50kPa
- Průtok: 40m3/hod
- Vstupní teplota chladícího média: 30°C

 TV2 – okruh Teplé Vody – žlutý:

- Hydraulické zakončení: Victaulic UK 76,1
- Pracovní tlak: 4,5bar
- diferenční tlak pro datový sál: 50kPa
- Průtok: 40m3/hod
- Vstupní teplota chladícího média: 30°C

 SV1 – okruh Studené Vody – zelený:

- Hydraulické zakončení: Victaulic UK 76,1
- Pracovní tlak: 4,5bar
- diferenční tlak pro datový sál: 100kPa
- Průtok: 20m3/hod
- Vstupní teplota chladícího média 11,5°C

 SV2 – okruh Studené Vody – modrý:

- Hydraulické zakončení: Victaulic UK 76,1
- Pracovní tlak: 4,5bar
- diferenční tlak pro datový sál: 100kPa
- Průtok: 20m3/hod
- Vstupní teplota chladícího média 11,5°C

 SV3 – okruh Studené Vody – tyrkysový:

- Hydraulické zakončení: Victaulic UK 76,1
- Pracovní tlak: 4,5bar
- diferenční tlak pro datový sál: 100kPa
- Průtok: 20m3/hod
- Vstupní teplota chladícího média 11,5°C

#### Chlazení na datovém sále — plánovaný stav

Zadavatel předpokládá, že v rámci plánované modernizace datového sálu dojde k navýšení teploty okruhů teplé vody na 38°C a navýšení kapacity o další (třetí okruh teplé vody). Předpokládaný termín realizace je do konce listopadu 2026. Z tohoto důvodu již zadavatel očekává technická řešení výpočetní části clusteru (plus další, je-li to technický možné) umožňující odvod tepla do okruhů s provozní teplotou cca. 38°C.

### WAN síť

WAN síť zadavatele je postavena na technologii 100Gb/s Ethernet a je tvořena dvěma hraničními prvky – L3 switchi Cisco Nexus 9336C-FX2 s porty QSFP28. Hraniční prvky jsou vzájemně propojeny čtyřmi 100Gb/s propoji. 

Hraniční prvky WAN sítě nejsou osazeny transceivery, je potřeba je dodat.

### Storage síť 

Storage síť zadavatele je postavena na technologii 100Gb/s Ethernet a je tvořena dvěma hraničními prvky – L3 switchi Cisco Nexus 9336C-FX2 s porty QSFP28. Hraniční prvky jsou vzájemně propojeny čtyřmi 100Gb/s propoji. Storage síť je připojena do centrální 100Gb/s WAN/LAN sítě zadavatele čtyřmi 100Gb/s propoji.

Hraniční prvky storage sítě nejsou osazeny transceivery, je potřeba je dodat.

Page 1

** „Výpočetní cluster VC III“ a „HPCQC – AI výpočetní cluster“**

**Základní požadavky zadavatele na předmět veřejné zakázky**

**Obsah**

**Základní požadavky zadavatele na předmět veřejné zakázky**	1

1	Úvod	1

2	Parametry zakázky	1

3	Záměr	2

4	Výpočetní cluster VC III	2

4.1	Komponenty	3

4.2	Řešení superpočítače	4

4.3	Požadavky	5

5	HPCQC – AI výpočetní cluster	8

5.1	Komponenty	8

5.2	Řešení superpočítače	10

5.3	Požadavky	11

6	Rozsah zakázky	14

7	Závazný obsah Návrhu	14

8	Požadavky na záruku a servisní služby	16

9	Infrastruktura zadavatele	17

9.1	Datové centrum	17

9.2	WAN síť	18

9.3	Storage síť	18

## Úvod

Obsahem tohoto dokumentu jsou informace pro dvě připravované veřejné zakázky „**Výpočetní cluster VC III“ a **„**HPCQC – AI výpočetní cluster“,** předběžné požadavky na rozsah, požadované vlastnosti, parametry a funkcionality.

***Všechny požadavky a parametry uvedené v tomto dokumentu jsou předběžné.***

## Parametry zakázky

Předpokládaný termín realizace zakázky je rok 2026.

Předpokládaná hodnota navazujícího zadávacího řízení „**Výpočetní cluster VC III“** je 195 500 000 Kč bez DPH.

Předpokládaná hodnota navazujícího zadávacího řízení „**HPCQC – AI výpočetní cluster“** je 177 000 000 Kč bez DPH.

Page 2

Zakázka „**Výpočetní cluster VC III“** je financována z prostředků operačního programu Jan Amos Komenský (OP JAK), projekt Modernizace e-INFRA CZ II (CZ.02.01.01/00/23_016/0008329) a vlastních prostředků.

Zakázka „**HPCQC – AI výpočetní cluster“** je financována z prostředků operačního programu Jan Amos Komenský (OP JAK), projekt Centrum pro umělou inteligenci a kvantové výpočty v systémovém výzkumu mozku (registrační číslo: CZ.02.01.01/00/23_029/0008437), akronym CLARA, a z vlastních zdrojů

Zadavatel předpokládá, že v rámci hodnocení stanoví pevnou cenu a bude hodnotit pouze kvalitu nabízeného plnění. V rámci kritérií kvality bude hodnocena zejména technická úroveň řešení s důrazem na hodnotu výpočetního výkonu.

## Záměr

Záměrem zadavatele je modernizace a posílení kapacit ICT infrastruktury Národního superpočítačového centra IT4Innovations.

V rámci modernizace a posílení kapacit ICT infrastruktury centra budou pořízeny, instalovány a zpřístupněny uživatelům centra superpočítače pro řešení nejnáročnějších vědeckých a inženýrských výpočetních úloh. Tyto nové superpočítače postupně nahradí stávající superpočítač Karolína a dále poslouží vědeckým cílům projektu CLARA.

V roce 2026 budou realizovány oba superpočítače, kde superpočítač VC III nahradí v tom čase již morálně zastaralý stávající superpočítač Karolína. Superpočítač VC III bude výkonem převyšovat stávající superpočítač Karolína a bude používat v době realizace nejmodernější technologie. Hlavním cílem je poskytnout moderní technologie uživatelům centra pro široké spektrum úloh, od tradičních HPC simulací až po nejmodernější úlohy z oblasti umělé inteligence (AI). **Realizace superpočítače VC III je předmětem této veřejné zakázky.**

Ve stejném roce dojde taktéž k instalaci nového superpočítače HPCQC – AI výpočetní cluster, který bude primárně sloužit potřebám projektu CLARA, který je zaměřen na výzkum neurodegenerativních onemocnění mozku. **Realizace HPCQC – AI výpočetní clusteru je předmětem této veřejné zakázky.**

Ačkoliv z technického hlediska mohou být výsledná řešení do jisté míry podobná, bude každý výpočetní systém pořizován na základě samostatného zadávacího řízení, jelikož se jedná o dva samostatné funkční celky.

Oba superpočítače budou využívány taktéž k simulacím kvantových počítačů jakožto doplnění a předstupeň kvantového počítače VLQ, konsorcia LUMI-Q, který je instalován a provozován v datovém centru IT4Innovations (tedy stejném jako předchozí i nově pořizované superpočítače).

Nově realizované superpočítače VC III a HPCQC – AI výpočetní cluster budou integrovány do infrastruktury superpočítačového centra IT4Innovations, budou instalovány na datovém sále zadavatele, budou integrovány do síťové infrastruktury zadavatele a budou zpřístupňovat centralizovaná úložiště zadavatele.

Pozn. V textu jsou uváděny rychlosti a kapacity za použití dekadických jednotek (násobky deseti), pokud není explicitně uvedena binární jednotka (např. KiB, MiB).

## Výpočetní cluster VC III

Pro superpočítač VC III jsou v současné době na straně zadavatele zajištěny prostředky financování z národních zdrojů (OP JAK) ve výši 195 500 000 Kč bez DPH.

Page 3

### Komponenty

Superpočítač je komplexní systém sestávající z výpočetních, úložných, síťových a dalších systémů 
a softwarového řešení určený pro provádění náročných výpočtů (HPC).

![A diagram of a project

Description automatically generated](image)

Obrázek 1 Orientační schéma řešení superpočítače VC III

**Výpočetní cluster** je tvořen **Výpočetními servery** propojenými **Výpočetní sítí** – vysokorychlostní sítí s nízkou latencí. Výpočetní cluster je určen pro provádění výpočetních úloh uživatelů. Výpočetní servery poskytují výpočetní výkon, Výpočetní síť umožňuje rychlou komunikaci mezi servery a efektivní provádění paralelních úloh. Pro servery clusteru je dále používáno též označení uzel.

**Přístupové servery*** – *servery sloužící pro přístup uživatelů, pro přípravu úloh a dat, kompilaci a ladění kódů, pro zpracování výsledků a pro přenos dat.

**Úložiště** slouží k ukládání a sdílení dat. Úložiště jsou realizována jako komplexní řešení úložných zařízení, I/O serverů (např. souborových serverů), datových sítí a potřebného softwarového vybavení na straně serverů i klientů. Úložiště poskytující souborové služby jsou označována jako **Souborová úložiště**.

IT4Innovations strukturuje uživatelská úložiště výpočetních clusterů takto:

- úložiště HOME – souborové úložiště pro uživatelská nastavení operačního systému a aplikací na superpočítači
- úložiště SCRATCH – souborové úložiště pro krátkodobá data uživatelů, intenzivně používaná výpočetními uzly superpočítače
- úložiště PROJECT – souborové úložiště pro střednědobá a dlouhodobá projektová data uživatelů, sdílená mezi superpočítači IT4Innovations (existující úložiště zadavatele, není součástí zakázky)

Page 4

**Úložiště** infrastruktury je určeno pro ukládání a sdílení dat infrastruktury superpočítače, tj. pro uložení systémových obrazů (image) serverů, logů, dat infrastrukturních služeb, uživatelského aplikačního vybavení, plánovače atd.

**Infrastrukturní a management servery** jsou určené pro správu superpočítače, zdrojů, úloh, licencí a poskytování infrastrukturních služeb (např. DHCP, DNS, LDAP, licenční servery, plánovače, monitoring, logování atd.), zdrojů.

Řešení **Zálohování** zajišťuje ochranu dat před úplnou ztrátou v případě vážného selhání primárního úložiště dat, chyby apod.

Superpočítač obsahuje **Síťovou infrastrukturu,*** *tj. síťové propojení komponent, systémů tak, aby bylo dosaženo požadované funkcionality, byl zajištěn přístup na jednotlivé služby, byl zajištěn výkon, dostupnost a bezpečnost.

Síťovou infrastrukturu tvoří zejména Výpočetní síť, LAN síť, integrace do WAN sítě zadavatele, integrace do storage sítě zadavatele a případně další sítě (například datové sítě SAN) dle návrhu dodavatele*.*

**Výpočetní síť*** *propojuje výpočetní servery, přístupové servery, je použita pro zpřístupnění některých úložišť.

**LAN síť** zajišťuje komunikaci mezi zařízeními uvnitř superpočítače, slouží ke správě systému, poskytování infrastrukturních služeb atp.

**Integrace do WAN sítě** zadavatele zajišťuje propojení do WAN sítě zadavatele a zprostředkovaně služby internetu v superpočítači.

**Integrace do storage sítě** zadavatele zajišťuje propojení do storage sítě zadavatele, kde jsou připojena centralizovaná úložiště zadavatele (např. úložiště PROJECT), tak aby byla zajištěna dostupnost úložišť na uzlech superpočítače. Integrace je obvykle realizována síťovými branami realizujícími propojení storage sítě zadavatele (100 Gb/s Ethernet) a výpočetní sítě clusteru.

**Infrastrukturu pro provoz v datovém centru** tvoří. zejména racky potřebné pro umístění zařízení, řešení chlazení zařízení superpočítače, napájení, rozhraní a napojení na infrastrukturu datového centra.

**Softwarové vybavení** je nezbytnou součástí řešení superpočítače. Softwarové vybavení zahrnuje mj. operační systémy všech serverů, firmware a ovladače hardware, knihovny, infrastrukturní software, software pro realizaci výpočetního prostředí superpočítače a výpočetní aplikace.

### Řešení superpočítače

Řešení superpočítače musí umožňovat efektivní provádění mnoha současných výpočetních úloh všech fází životního cyklu úloh (příprava, výpočet, zpracování výsledků) různého typu (paralelní, sériové; dávkové, interaktivní) mnoha uživatelů, bude zajišťovat bezpečné uložení dat uživatelů a rychlý přístup k datům, efektivní správu systému, komponent, zdrojů a uživatelů.

Řešení musí poskytovat transparentní, jednotné, sdílené uživatelské prostředí a jednotný přístup k výpočetním zdrojům.

Redundance řešení musí být v takovém rozsahu, aby při selhání fyzické komponenty nedošlo k významnému omezení poskytování služeb (aby neselhala klíčová služba nutná pro běh řešení) nebo aby nedošlo ke ztrátě důležitých dat. Zabezpečení významných dat bude dále zajištěno zálohováním.

Page 5

Všechny servery řešení budou umožňovat vzdálenou správu nezávislou na běhu operačního systému.

Řešení musí umožňovat efektivní provoz a nízké provozní náklady.

Superpočítač VC III bude obsahovat tyto komponenty:

- **Výpočetní servery** 
- **Výpočetní síť**
- **Přístupové servery**
- **Úložiště HOME**
- **Úložiště SCRATCH**
- **Úložiště infrastruktury**
- **Infrastrukturní a management servery**
- **Zálohování**
- **Síťová infrastruktura**
  - **LAN síť**
  - **Integrace do WAN sítě **
  - **Integraci do storage sítě**
- **Infrastruktura pro provoz v datovém centru**
- **Softwarové vybavení**

### Požadavky

#### Výpočetní servery

- minimálně 110 výpočetních serverů
- architektura x86_64, nebo ARM
- OS Linux
- jeden nebo dva procesory na výpočetní server
- minimálně 960 GB standardní paměti DDR RAM na výpočetní server
- min. 450 GB/s propustnost do paměti CPU/socket
- min. čtyři GPU akcelerátory
- výkon min. 4000 TFlop/s na server v FP32 (tensorflow/sparsity AI maximální teoretický výkon)
- minimálně 2 NIC pro vysokorychlostní síť s agregovanou šířkou pásma min. 800 Gb/s
- chlazení pomocí DLC, celkově min. 90% tepla do vody o vstupní teplotě min. 38 °C

#### Přístupové servery

- 2 přístupové (login) servery
- CPU, GPU a paměť serveru – shodná konfigurace jako u výpočetních serverů

#### Úložiště SCRATCH

Úložiště SCRATCH slouží pro uložení krátkodobých dat uživatelů, data jsou obvykle intenzivně používaná výpočetními uzly superpočítače.

- Úložiště SCRATCH bude mít čistou kapacitu minimálně 2PB, propustnost minimálně 1000 GB/s a bude těsně (s vysokou propustností a s nízkou latencí) připojeno na všechny uživatelsky dostupné uzly (výpočetní, přístupové).
- Předpokládáme použití technologie SSD disků (technologie NVMe) pro zajištěné vysoké propustnosti a I/O výkonu (5000 kIOPS).

Page 6

- Jako souborový systém bude použit vysoce výkonný paralelní clusterový souborový systém „enterprise“ kvality, zajišťující kromě vysokého výkonu i vysokou bezpečnost přístupu k datům ve sdíleném prostředí.

#### Výpočetní síť

- Výpočetní síť bude mít rychlost portu minimálně 400Gb/s a latenci menší než 10 mikrosekund.
- Topologie sítě musí poskytovat neblokující ostrovy výpočetních uzlů o velikosti minimálně 32 uzlů.
- Síť musí podporovat hardwarovou akceleraci MPI komunikace.
- Síť musí podporovat IP protokol. 
- Síť musí být vhodná a podporovaná pro řešení úložiště SCRATCH.

#### Úložiště HOME

Úložiště HOME slouží pro uložení uživatelských nastavení operačního systému a aplikací v rámci superpočítače, předpokládáme tedy potřebu relativně nízké kapacity, přiměřené propustnosti a výkonu.

- Úložiště HOME bude mít čistou kapacitu minimálně 25TB a bude sdíleno na všechny uživatelsky dostupné uzly (výpočetní, přístupové).
- Úložiště bude postaveno na SSD discích.
- Předpokládáme použití technologie NFS s vysokou dostupností (HA).

#### Úložiště infrastruktury

Úložiště infrastruktury je určeno pro ukládání a sdílení dat infrastruktury superpočítače, tj. pro uložení systémových obrazů (image) serverů, logů, dat infrastrukturních služeb, uživatelského aplikačního vybavení, plánovače atd.

Úložiště bude mít čistou kapacitu minimálně 25TB.

Úložiště bude postaveno na SSD discích.

Konfigurace bude v režimu redundance/vysoké dostupnosti minimálně na úrovni disků, řadičů diskového pole, připojení k serverům a souborových serverů.

Úložiště infrastruktury bude připojeno k serverům (přímo či vhodnou sítí) blokovým způsobem anebo pomocí síťového souborového systému (např. NFS). Předpokládané použití ze strany zadavatele:

- APPS – aplikační software sdílený pomocí NFS na všechny uživatelsky dostupné servery

Pro realizaci úložiště infrastruktury a úložiště HOME lze použít jedno společné diskového pole.

#### Infrastrukturní a management servery

Systém bude obsahovat minimálně dva fyzické servery pro infrastrukturní služby a management výpočetního systému. Klíčové infrastrukturní služby budou realizovány v konfiguraci vysoké dostupnosti (HA).

Několik infrastrukturních serverů (předpokládaný počet cca 5ks) bude určeno pro běh služeb zadavatele.

Preferujeme – v případě použití malého počtu fyzických serverů – oddělení služeb na virtuální servery (použití serverové virtualizace).

Page 7

#### Zálohování

Zálohování bude poskytovat zabezpečení dat infrastrukturních a management serverů, úložiště infrastruktury a úložiště HOME.

Zálohování bude řešeno bez využití pásek (na diskové úložiště) a bude využívat technologii pro vyšší efektivitu uložení dat (např. kompresi nebo deduplikaci). Zálohování bude využívat vyhrazené, nezávislé úložiště dat.

#### LAN síť

LAN síť bude zajišťovat komunikaci mezi zařízeními uvnitř superpočítače a poskytovat připojení do WAN sítě IT4Innovations.

LAN síť bude obsahovat veřejné a privátní části sítě. 

Veřejné části sítě (dále jen veřejné sítě), ve kterých budou použity veřejné IPv4 a IPv6 adresy, budou sloužit pro poskytování služeb dostupných z internetu. 

Privátní části sítě (dále jen privátní sítě), ve kterých budou použity privátní IPv4 adresy, budou sloužit pro vnitřní služby a pro management zařízení.

Bude zajištěna konektivita výpočetních serverů do LAN sítě a internetu.

Zařízením v privátních sítích musí být umožněn přístup do internetu přes NAT.

LAN síť bude rozdělena do různých L3 sítí. Pro každou L3 síť bude použita jiná L2 síť (VLAN nebo jiný aktivní prvek). Je nežádoucí používat jednu L2 síť pro více L3 sítí. Rozdělení sítí bude zajišťovat zejména oddělení těchto provozů:

- služby dostupné z internetu
- datová komunikace mezi servery (služby)
- management síťových aktivních prvků
- management diskových polí a storage zařízení
- management serverů (BMC, IPMI, apod.)
- management non-IT infrastruktury (napájení, chlazení apod.)

LAN síť nezbytná pro propojení přístupových serverů do WAN sítě bude řešena redundantními prvky. Aktivní prvky sítě budou vzdáleně řízené a centrálně spravovatelné.

#### Integrace do WAN sítě

Součástí zakázky je připojení do WAN sítě zadavatele.

Připojení do WAN sítě zadavatele musí poskytovat konektivitu min. 2x100 Gb/s, pro připojení jsou vyhrazeny dva porty QSFP28 na prvcích WAN sítě zadavatele.

#### Integrace do storage sítě

Součástí zakázky je připojení do storage sítě zadavatele. Pro realizaci se předpokládá použití minimálně dvou vyhrazených serverů implementujících síťové brány mezi storage sítí zadavatele (na technologii 100Gb/s Ethernet) a výpočetní sítí clusteru

Připojení do storage sítě zadavatele musí poskytovat konektivitu min. 2x100 Gb/s, pro připojení jsou vyhrazeny dva porty QSFP28 na prvcích storage sítě zadavatele.

#### Softwarové vybavení

Požadovanou součástí řešení superpočítače je softwarové vybavení.

Page 8

Softwarové vybavení zahrnuje operační systémy všech serverů, firmware a ovladače hardware, systémové, komunikační a další knihovny, infrastrukturní software a software pro realizaci výpočetního prostředí superpočítače.

Infrastrukturní software a software pro realizaci výpočetního prostředí superpočítače zahrnuje software pro správu a provisioning serverů/clusteru, management software zařízení, software řešení datových úložišť a bran, sdílené a/nebo clusterové, paralelní souborové systémy, software infrastrukturních služeb, zálohovací software, software pro serverovou virtualizace (bude-li použita v řešení), software pro monitoring infrastruktury, sběr a analýza logů, optimalizovaný softwarový stack pro komunikaci ve výpočetní síti, optimalizované MPI a další.

Předpokládáme použití OS Linux na všech serverech řešení superpočítače.

Na clusteru bude provozován plánovač úloh Slurm.

#### Bezpečnost

Vzhledem k otevřenému charakteru centra IT4Innovations, které poskytuje služby širokému spektru uživatelů, usilujeme o bezpečnost našich systémů. IT4Innovations je držitelem certifikátů systému managementu bezpečnosti informací podle normy ISO 27001 (ISO/IEC 27001:2013, ČSN ISO/IEC 27001:2014). Preferuje použití operačního systému a softwarového vybavení s dobrou dostupností bezpečnostních aktualizací a jejich rychlou aplikaci. Dostupnost bezpečnostních aktualizací by měla být zajištěna po celou dobu provozování celého komplexního softwarového stacku.

#### Identity management

IT4Innovations provádí centralizovanou správu všech uživatelů centra. Informace o uživatelích jsou propagovány/synchronizovány z centrální repository na všechny provozované systémy/superpočítače. Realizace uživatelských účtů superpočítače bude používat technologie LDAP a SSSD. Účty uživatelů budou uloženy a spravovány v LDAP databázi. Pro realizaci uživatelských účtů a skupin budou použita LDAP schémata posixAccount a posixGroup. Správa uživatelských účtů a skupin bude realizována zabezpečeným protokolem LDAP. Správu uživatelských účtů a skupin bude realizovat výhradně zadavatel.

## HPCQC – AI výpočetní cluster

### Komponenty

Superpočítač je komplexní systém sestávající z výpočetních, úložných, síťových a dalších systémů 
a softwarového řešení určený pro provádění náročných výpočtů (HPC).

Page 9

![A diagram of a project

Description automatically generated](image)

Obrázek 1 Orientační schéma řešení superpočítače VC III

**Výpočetní cluster** je tvořen **Výpočetními servery** propojenými **Výpočetní sítí** – vysokorychlostní sítí s nízkou latencí. Výpočetní cluster je určen pro provádění výpočetních úloh uživatelů. Výpočetní servery poskytují výpočetní výkon, Výpočetní síť umožňuje rychlou komunikaci mezi servery a efektivní provádění paralelních úloh. Pro servery clusteru je dále používáno též označení uzel.

**Přístupové servery*** – *servery sloužící pro přístup uživatelů, pro přípravu úloh a dat, kompilaci a ladění kódů, pro zpracování výsledků a pro přenos dat.

**Úložiště** slouží k ukládání a sdílení dat. Úložiště jsou realizována jako komplexní řešení úložných zařízení, I/O serverů (např. souborových serverů), datových sítí a potřebného softwarového vybavení na straně serverů i klientů. Úložiště poskytující souborové služby jsou označována jako **Souborová úložiště**.

IT4Innovations strukturuje uživatelská úložiště výpočetních clusterů takto:

- úložiště HOME – souborové úložiště pro uživatelská nastavení operačního systému a aplikací na superpočítači
- úložiště SCRATCH – souborové úložiště pro krátkodobá data uživatelů, intenzivně používaná výpočetními uzly superpočítače
- úložiště PROJECT – souborové úložiště pro střednědobá a dlouhodobá projektová data uživatelů, sdílená mezi superpočítači IT4Innovations (existující úložiště zadavatele, není součástí zakázky)

**Úložiště** infrastruktury je určeno pro ukládání a sdílení dat infrastruktury superpočítače, tj. pro uložení systémových obrazů (image) serverů, logů, dat infrastrukturních služeb, uživatelského aplikačního vybavení, plánovače atd.

Page 10

**Infrastrukturní a management servery** jsou určené pro správu superpočítače, zdrojů, úloh, licencí a poskytování infrastrukturních služeb (např. DHCP, DNS, LDAP, licenční servery, plánovače, monitoring, logování atd.), zdrojů.

Řešení **Zálohování** zajišťuje ochranu dat před úplnou ztrátou v případě vážného selhání primárního úložiště dat, chyby apod.

Superpočítač obsahuje **Síťovou infrastrukturu,*** *tj. síťové propojení komponent, systémů tak, aby bylo dosaženo požadované funkcionality, byl zajištěn přístup na jednotlivé služby, byl zajištěn výkon, dostupnost a bezpečnost.

Síťovou infrastrukturu tvoří zejména Výpočetní síť, LAN síť, integrace do WAN sítě zadavatele, integrace do storage sítě zadavatele a případně další sítě (například datové sítě SAN) dle návrhu dodavatele*.*

**Výpočetní síť*** *propojuje výpočetní servery, přístupové servery, je použita pro zpřístupnění některých úložišť.

**LAN síť** zajišťuje komunikaci mezi zařízeními uvnitř superpočítače, slouží ke správě systému, poskytování infrastrukturních služeb atp.

**Integrace do WAN sítě** zadavatele zajišťuje propojení do WAN sítě zadavatele a zprostředkovaně služby internetu v superpočítači.

**Integrace do storage sítě** zadavatele zajišťuje propojení do storage sítě zadavatele, kde jsou připojena centralizovaná úložiště zadavatele (např. úložiště PROJECT), tak aby byla zajištěna dostupnost úložišť na uzlech superpočítače. Integrace je obvykle realizována síťovými branami realizujícími propojení storage sítě zadavatele (100 Gb/s Ethernet) a výpočetní sítě clusteru.

**Infrastrukturu pro provoz v datovém centru** tvoří. zejména racky potřebné pro umístění zařízení, řešení chlazení zařízení superpočítače, napájení, rozhraní a napojení na infrastrukturu datového centra.

**Softwarové vybavení** je nezbytnou součástí řešení superpočítače. Softwarové vybavení zahrnuje mj. operační systémy všech serverů, firmware a ovladače hardware, knihovny, infrastrukturní software, software pro realizaci výpočetního prostředí superpočítače a výpočetní aplikace.

### Řešení superpočítače

Řešení superpočítače musí umožňovat efektivní provádění mnoha současných výpočetních úloh všech fází životního cyklu úloh (příprava, výpočet, zpracování výsledků) různého typu (paralelní, sériové; dávkové, interaktivní) mnoha uživatelů, bude zajišťovat bezpečné uložení dat uživatelů a rychlý přístup k datům, efektivní správu systému, komponent, zdrojů a uživatelů.

Řešení musí poskytovat transparentní, jednotné, sdílené uživatelské prostředí a jednotný přístup k výpočetním zdrojům.

Redundance řešení musí být v takovém rozsahu, aby při selhání fyzické komponenty nedošlo k významnému omezení poskytování služeb (aby neselhala klíčová služba nutná pro běh řešení) nebo aby nedošlo ke ztrátě důležitých dat. Zabezpečení významných dat bude dále zajištěno zálohováním.

Všechny servery řešení budou umožňovat vzdálenou správu nezávislou na běhu operačního systému.

Řešení musí umožňovat efektivní provoz a nízké provozní náklady.

Superpočítač HPCQC – AI bude obsahovat tyto komponenty:

Page 11

- **Výpočetní servery** 
- **Výpočetní síť**
- **Přístupové servery**
- **Úložiště HOME**
- **Úložiště SCRATCH**
- **Úložiště infrastruktury**
- **Infrastrukturní a management servery**
- **Zálohování**
- **Síťová infrastruktura**
  - **LAN síť**
  - **Integrace do WAN sítě **
  - **Integraci do storage sítě**
- **Infrastruktura pro provoz v datovém centru**
- **Softwarové vybavení**

### Požadavky

#### Výpočetní servery

- minimálně 100 výpočetních serverů
- architektura x86_64, nebo ARM
- OS Linux
- jeden nebo dva procesory na výpočetní server
- minimálně 960 GB standardní paměti DDR RAM na výpočetní server
- min. 450 GB/s propustnost do paměti CPU/socket
- min. čtyři GPU akcelerátory
- výkon min. 4000 TFlop/s na server v FP32 (tensorflow/sparsity AI maximální teoretický výkon)
- minimálně 2 NIC pro vysokorychlostní síť s agregovanou šířkou pásma min. 800 Gb/s
- chlazení pomocí DLC, celkově min. 90% tepla do vody o vstupní teplotě min. 38 °C

#### Přístupové servery

- 2 přístupové (login) servery
- CPU, GPU a paměť serveru – shodná konfigurace jako u výpočetních serverů

#### Úložiště SCRATCH

Úložiště SCRATCH slouží pro uložení krátkodobých dat uživatelů, data jsou obvykle intenzivně používaná výpočetními uzly superpočítače.

- Úložiště SCRATCH bude mít čistou kapacitu minimálně 2PB, propustnost minimálně 1000 GB/s a bude těsně (s vysokou propustností a s nízkou latencí) připojeno na všechny uživatelsky dostupné uzly (výpočetní, přístupové).
- Předpokládáme použití technologie SSD disků (technologie NVMe) pro zajištěné vysoké propustnosti a I/O výkonu (5000 kIOPS).
- Jako souborový systém bude použit vysoce výkonný paralelní clusterový souborový systém „enterprise“ kvality, zajišťující kromě vysokého výkonu i vysokou bezpečnost přístupu k datům ve sdíleném prostředí.

Page 12

#### Výpočetní síť

- Výpočetní síť bude mít rychlost portu minimálně 400Gb/s a latenci menší než 10 mikrosekund.
- Topologie sítě musí poskytovat neblokující ostrovy výpočetních uzlů o velikosti minimálně 32 uzlů.
- Síť musí podporovat hardwarovou akceleraci MPI komunikace.
- Síť musí podporovat IP protokol. 
- Síť musí být vhodná a podporovaná pro řešení úložiště SCRATCH.

#### Úložiště HOME

Úložiště HOME slouží pro uložení uživatelských nastavení operačního systému a aplikací v rámci superpočítače, předpokládáme tedy potřebu relativně nízké kapacity, přiměřené propustnosti a výkonu.

- Úložiště HOME bude mít čistou kapacitu minimálně 25TB a bude sdíleno na všechny uživatelsky dostupné uzly (výpočetní, přístupové).
- Úložiště bude postaveno na SSD discích.
- Předpokládáme použití technologie NFS s vysokou dostupností (HA).

#### Úložiště infrastruktury

Úložiště infrastruktury je určeno pro ukládání a sdílení dat infrastruktury superpočítače, tj. pro uložení systémových obrazů (image) serverů, logů, dat infrastrukturních služeb, uživatelského aplikačního vybavení, plánovače atd.

Úložiště bude mít čistou kapacitu minimálně 25TB.

Úložiště bude postaveno na SSD discích.

Konfigurace bude v režimu redundance/vysoké dostupnosti minimálně na úrovni disků, řadičů diskového pole, připojení k serverům a souborových serverů.

Úložiště infrastruktury bude připojeno k serverům (přímo či vhodnou sítí) blokovým způsobem anebo pomocí síťového souborového systému (např. NFS). Předpokládané použití ze strany zadavatele:

- APPS – aplikační software sdílený pomocí NFS na všechny uživatelsky dostupné servery

Pro realizaci úložiště infrastruktury a úložiště HOME lze použít jedno společné diskového pole.

#### Infrastrukturní a management servery

Systém bude obsahovat minimálně dva fyzické servery pro infrastrukturní služby a management výpočetního systému. Klíčové infrastrukturní služby budou realizovány v konfiguraci vysoké dostupnosti (HA).

Několik infrastrukturních serverů (předpokládaný počet cca 5ks) bude určeno pro běh služeb zadavatele.

Preferujeme – v případě použití malého počtu fyzických serverů – oddělení služeb na virtuální servery (použití serverové virtualizace).

#### Zálohování

Zálohování bude poskytovat zabezpečení dat infrastrukturních a management serverů, úložiště infrastruktury a úložiště HOME.

Page 13

Zálohování bude řešeno bez využití pásek (na diskové úložiště) a bude využívat technologii pro vyšší efektivitu uložení dat (např. kompresi nebo deduplikaci). Zálohování bude využívat vyhrazené, nezávislé úložiště dat.

#### LAN síť

LAN síť bude zajišťovat komunikaci mezi zařízeními uvnitř superpočítače a poskytovat připojení do WAN sítě IT4Innovations.

LAN síť bude obsahovat veřejné a privátní části sítě. 

Veřejné části sítě (dále jen veřejné sítě), ve kterých budou použity veřejné IPv4 a IPv6 adresy, budou sloužit pro poskytování služeb dostupných z internetu. 

Privátní části sítě (dále jen privátní sítě), ve kterých budou použity privátní IPv4 adresy, budou sloužit pro vnitřní služby a pro management zařízení.

Bude zajištěna konektivita výpočetních serverů do LAN sítě a internetu.

Zařízením v privátních sítích musí být umožněn přístup do internetu přes NAT.

LAN síť bude rozdělena do různých L3 sítí. Pro každou L3 síť bude použita jiná L2 síť (VLAN nebo jiný aktivní prvek). Je nežádoucí používat jednu L2 síť pro více L3 sítí. Rozdělení sítí bude zajišťovat zejména oddělení těchto provozů:

- služby dostupné z internetu
- datová komunikace mezi servery (služby)
- management síťových aktivních prvků
- management diskových polí a storage zařízení
- management serverů (BMC, IPMI, apod.)
- management non-IT infrastruktury (napájení, chlazení apod.)

LAN síť nezbytná pro propojení přístupových serverů do WAN sítě bude řešena redundantními prvky. Aktivní prvky sítě budou vzdáleně řízené a centrálně spravovatelné.

#### Integrace do WAN sítě

Součástí zakázky je připojení do WAN sítě zadavatele.

Připojení do WAN sítě zadavatele musí poskytovat konektivitu min. 2x100 Gb/s, pro připojení jsou vyhrazeny dva porty QSFP28 na prvcích WAN sítě zadavatele.

#### Integrace do storage sítě

Součástí zakázky je připojení do storage sítě zadavatele. Pro realizaci se předpokládá použití minimálně dvou vyhrazených serverů implementujících síťové brány mezi storage sítí zadavatele (na technologii 100Gb/s Ethernet) a výpočetní sítí clusteru

Připojení do storage sítě zadavatele musí poskytovat konektivitu min. 2x100 Gb/s, pro připojení jsou vyhrazeny dva porty QSFP28 na prvcích storage sítě zadavatele.

#### Softwarové vybavení

Požadovanou součástí řešení superpočítače je softwarové vybavení.

Softwarové vybavení zahrnuje operační systémy všech serverů, firmware a ovladače hardware, systémové, komunikační a další knihovny, infrastrukturní software a software pro realizaci výpočetního prostředí superpočítače.

Page 14

Infrastrukturní software a software pro realizaci výpočetního prostředí superpočítače zahrnuje software pro správu a provisioning serverů/clusteru, management software zařízení, software řešení datových úložišť a bran, sdílené a/nebo clusterové, paralelní souborové systémy, software infrastrukturních služeb, zálohovací software, software pro serverovou virtualizace (bude-li použita v řešení), software pro monitoring infrastruktury, sběr a analýza logů, optimalizovaný softwarový stack pro komunikaci ve výpočetní síti, optimalizované MPI a další.

Předpokládáme použití OS Linux na všech serverech řešení superpočítače.

Na clusteru bude provozován plánovač úloh Slurm.

#### Bezpečnost

Vzhledem k otevřenému charakteru centra IT4Innovations, které poskytuje služby širokému spektru uživatelů, usilujeme o bezpečnost našich systémů. IT4Innovations je držitelem certifikátů systému managementu bezpečnosti informací podle normy ISO 27001 (ISO/IEC 27001:2013, ČSN ISO/IEC 27001:2014). Preferuje použití operačního systému a softwarového vybavení s dobrou dostupností bezpečnostních aktualizací a jejich rychlou aplikaci. Dostupnost bezpečnostních aktualizací by měla být zajištěna po celou dobu provozování celého komplexního softwarového stacku.

#### Identity management

IT4Innovations provádí centralizovanou správu všech uživatelů centra. Informace o uživatelích jsou propagovány/synchronizovány z centrální repository na všechny provozované systémy/superpočítače. Realizace uživatelských účtů superpočítače bude používat technologie LDAP a SSSD. Účty uživatelů budou uloženy a spravovány v LDAP databázi. Pro realizaci uživatelských účtů a skupin budou použita LDAP schémata posixAccount a posixGroup. Správa uživatelských účtů a skupin bude realizována zabezpečeným protokolem LDAP. Správu uživatelských účtů a skupin bude realizovat výhradně zadavatel.

## Rozsah zakázky

Součástí zakázky je:

- komplexní implementace celého systému v datovém centru zadavatele (doprava, integrace do datového centra, instalace, konfigurace, ladění, testování, likvidace obalů)
- příprava a provedení akceptačních testů pro prokázání funkčnosti, vlastností a parametrů díla
- zaškolení obsluhy (školení)
- poskytování servisu, podpory a provádění pravidelných sw upgradů po dobu záruční doby
- konzultace v průběhu provozu řešení

## Závazný obsah Návrhu

Návrh musí obsahovat tyto informace:

1. **Návrh technického řešení **
  - návrh hardwarového řešení
    - uvedení zvažovaných komponent, jejich počty, názvy výrobců a modelů
  - návrh softwarového řešení
    - uvedení zvažovaného SW vybavení, názvy výrobců, produktů a verzí
  - výkonové a kapacitní parametry řešení
    - výpočetní výkon v FP64 a FP32 na úrovni komponent i agregovaný
    - paměťová propustnost
    - výkon úložných zařízení (jak agregovaná propustnost, tak výkon IOPS)
  - energetická náročnost řešení 
    - specifikace proudového připojení [A]
  - popis chlazení systému

Page 15

- rámcové uvedení kapacity [kW] odvodu tepla do okruhů s teplou a studenou vodou
    - uvedení souladu návrhu chlazení s technickými parametry chladících okruhů, především objemu průtoků a způsobených tlakových ztrát při chlazení plně zatíženého systému kapalinou o teplotě 38°C v okruhu zadavatele a s chemickým složením uvedeným v popisu vlastností datového sálu (směs voda/glykol)
    - v případě nesouladu řešení s vlastnostmi chladících okruhů prosím uveďte možnosti jak chlazení zajistit, ať již snížením teploty chladící kapaliny, či snížení tlakových ztrát za pomocí snížení objemu průtoku chladící kapaliny v okruhu zadavatele
  - prostorová náročnost řešení 
    - použité racky, zabraná plocha, plošná i bodová zátěž [kg/m2] na podlahovou plochu
  - předpokládaná časová dostupnost navrhovaných technologií

*Zadavatel požaduje, aby každý z účastníků PTK ve svém návrhu potvrdil, že zvažovaná technická řešení jsou realizovatelná včetně jejich finální akceptace do konce října roku 2026.*

  - popis funkcionality a vlastností řešení
    - Explicitní uvedení jakým způsobem lze na navrženém HW provozovat akcelerovaným způsobem kvantový simulátor. Je potřeba uvést produktový název SW, verzi a referenci využití ve výzkumné instituci nebo soukromé firmě

*Funkcionalita kvantového simulátoru bude mandatorním požadavkem u systému HPCQC – AI a proto je potřeba volit komponenty především výpočetní části tak, aby akceleraci umožňovala.* 

  - spolehlivost a dostupnost řešení
  - soulad technického řešení (především výkonových a kapacitních parametrů) a rozpočtu
    - v případě, že požadované kapacitní a výkonové parametry zadavatele přesahují předpokládaný rozpočet, uveďte, prosím, varianty řešení v původním požadovaném rozsahu a taktéž adekvátně redukovaný návrh s dodržením daného rozpočtu. Varianty s původními požadovanými parametry prosím označte jako „Původní varianta“ a redukovanou verzi jako „Redukovaná varianta“
    - dále prosíme o explicitní potvrzení adekvátního poměru výpočetního výkonu výpočetních uzlů a kapacit síťového připojení výpočetních uzlů do vysokorychlostní sítě za účelem zpracování náročných úloh z oblasti umělé inteligence jako např. trénování velkých jazykových modelů jak z pohledu komunikace při paralelním trénování, tak přístupu na úložiště SCRATCH
    - taktéž prosíme o explicitní potvrzení adekvátního poměru kapacit a výkonu výpočetní a SCRATCH úložné části, především tedy celkový výpočetní výkon k agregované propustnosti a agregovanému výkonu IOPS operací

Page 16

- v případě, že byste doporučili jiné kapacity v rámci vysokorychlostní sítě či kapacity a výkon úložiště SCRATCH, uveďte toto prosím jako samostatnou pod-variantu varianty Původní a/nebo Redukované s označením „Optimalizovaná varianta“
  - návrh musí být k dispozici rovněž v elektronické formě umožňující editaci
2. **Návrh záruky a servisních služeb**
  - reaktivní služby
  - proaktivní služby
3. **Návrh licenčních podmínek **upravujících práva a závazky zadavatele k navrhovanému řešení
4. **Orientační cenová kalkulace navrhovaného řešení Výpočetního clusteru VC III / HPCQC – AI výpočetního clusteru **(indikativní nabídka) včetně rozkladu cen na logické a funkční celky a služby v členění minimálně:

Výpočetní servery, Výpočetní síť, Přístupové servery, Úložiště HOME, Úložiště SCRATCH, Úložiště infrastruktury, Infrastrukturní a management servery, Zálohování, LAN síť, Integrace do WAN sítě, Integrace do storage sítě, Racky, Chlazení, Softwarové vybavení, Slurm s podporou, Napojení na infrastrukturu DC, Implementace, Školení, Servisní služby.

Indikativní nabídka bude rovněž obsahovat výhled ohledně stability cen. Zadavatel cílí na možnost/vhodnost využit inflační doložku nebo vhodné mechanismy pro narovnání kritických cenových rozdílů v cenách vzniklých v průběhu plnění navazující veřejné zakázky.

## Požadavky na záruku a servisní služby

Zadavatel požaduje zohlednit následující parametry záruky a servisních služeb:

- záruční doba 5 let
- autorizovaný servis
- servis v místě instalace
- jediné kontaktní místo pro hlášení poruch
- možnost hlášení poruch a vad 24 hodin denně

Kategorie vad:

- Vada kategorie A – vada, která zcela nebo podstatným způsobem znemožňuje užívání superpočítače,
- Vada kategorie B – vada, která nebrání užívání superpočítače, ale podstatným způsobem jej omezuje, nebo která vytváří riziko znemožnění užívání superpočítače,
- Vada kategorie C – jiná vada, která není vadou kategorie A ani B

Zahájení řešení odstranění vady:

- Vada kategorie A – okamžitě po nahlášení vady
- Vada kategorie B – maximálně do 2 hodin od nahlášení vady
- Vada kategorie C – maximálně do 24 hodin od nahlášení vady

Odstranění vady:

- Vada kategorie A – do 24 hodin od nahlášení vady
- Vada kategorie B – do 72 hodin od nahlášení vady
- Vada kategorie C – do 7 pracovních dní od nahlášení vady

Za odstranění vady kategorie A nebo B lze považovat poskytnutí akceptovatelného náhradního řešení. Náhradní řešení vady kategorie A se považuje za nahlášenou vadu kategorie B a náhradní řešení vady kategorie B se považuje za nahlášenou vadu kategorie C; přípustné je jen to náhradní řešení, které skutečně umožňuje změnu kategorizace vady.

Page 17

## Infrastruktura zadavatele

### Datové centrum

IT4Innovations národní superpočítačové centrum provozuje veškeré systémy ve svém datovém sále umístěném v budově IT4Innovations.

Datové centrum IT4Innovations  disponuje redundantními zdroji zálohovaného napájení (dvě nezávislé napájecí větve, redundance 1+1) rozvodné soustavy 400/230 V;3+N+PE; 50 Hz; TN-S.

Datový sál o výměře 511 m2 poskytuje světlou výšku mezi systémovou podlahou a stropním podhledem 2.9 m.

#### Chlazení na datovém sále — současný stav

Chlazení pro datový sál poskytuje pět samostatných chladících kapalinových okruhů – dva okruhy teplé vody teploty a tři okruhy studené vody.

 

V datovém sále jsou ve zdvojené podlaze vyhotoveny tři větve z každého z pěti chladících okruhů. Na větvích jsou pro napojení technologie připraveny odbočky s bezúkapovými uzávěry DN65. Odbočky jsou umístěné pod technologickou podlahou datového sálu a jsou přístupné po vyjmutí některé z dlaždic technologické podlahy. V okruzích je použita směs 35% propylenglykol a 65% voda. 

 

Základní parametry chladících okruhů, včetně údajů pro připojení:

TV1 – okruh Teplé Vody – červený:

- Hydraulické zakončení: Victaulic UK 76,1
- Pracovní tlak: 4,5bar
- diferenční tlak pro datový sál: 50kPa
- Průtok: 40m3/hod
- Vstupní teplota chladícího média: 30°C

 TV2 – okruh Teplé Vody – žlutý:

- Hydraulické zakončení: Victaulic UK 76,1
- Pracovní tlak: 4,5bar
- diferenční tlak pro datový sál: 50kPa
- Průtok: 40m3/hod
- Vstupní teplota chladícího média: 30°C

 SV1 – okruh Studené Vody – zelený:

- Hydraulické zakončení: Victaulic UK 76,1
- Pracovní tlak: 4,5bar
- diferenční tlak pro datový sál: 100kPa
- Průtok: 20m3/hod
- Vstupní teplota chladícího média 11,5°C

 SV2 – okruh Studené Vody – modrý:

- Hydraulické zakončení: Victaulic UK 76,1
- Pracovní tlak: 4,5bar
- diferenční tlak pro datový sál: 100kPa
- Průtok: 20m3/hod
- Vstupní teplota chladícího média 11,5°C

Page 18

SV3 – okruh Studené Vody – tyrkysový:

- Hydraulické zakončení: Victaulic UK 76,1
- Pracovní tlak: 4,5bar
- diferenční tlak pro datový sál: 100kPa
- Průtok: 20m3/hod
- Vstupní teplota chladícího média 11,5°C

#### Chlazení na datovém sále — plánovaný stav

Zadavatel předpokládá, že v rámci plánované modernizace datového sálu dojde k navýšení teploty okruhů teplé vody na 38°C a navýšení kapacity o další (třetí okruh teplé vody). Předpokládaný termín realizace je do konce listopadu 2026. Z tohoto důvodu již zadavatel očekává technická řešení výpočetní části clusteru (plus další, je-li to technický možné) umožňující odvod tepla do okruhů s provozní teplotou cca. 38°C.

### WAN síť

WAN síť zadavatele je postavena na technologii 100Gb/s Ethernet a je tvořena dvěma hraničními prvky – L3 switchi Cisco Nexus 9336C-FX2 s porty QSFP28. Hraniční prvky jsou vzájemně propojeny čtyřmi 100Gb/s propoji. 

Hraniční prvky WAN sítě nejsou osazeny transceivery, je potřeba je dodat.

### Storage síť 

Storage síť zadavatele je postavena na technologii 100Gb/s Ethernet a je tvořena dvěma hraničními prvky – L3 switchi Cisco Nexus 9336C-FX2 s porty QSFP28. Hraniční prvky jsou vzájemně propojeny čtyřmi 100Gb/s propoji. Storage síť je připojena do centrální 100Gb/s WAN/LAN sítě zadavatele čtyřmi 100Gb/s propoji.

Hraniční prvky storage sítě nejsou osazeny transceivery, je potřeba je dodat.

[{"source":"image_ocr","message":"Image 1 OCR failed: OCR error: Tesseract OCR failed: Image processing failed: Parsing error: Failed to decode image: The image format could not be determined"},{"source":"image_ocr","message":"Image 0 OCR failed: OCR error: Tesseract OCR failed: Image processing failed: Parsing error: Failed to decode image: The image format could not be determined"}]

06_PTK/vyzva/vyzva_PTK_VCIII_CLARA.pdf 4 pages · 1 tables
<!-- PAGE 1 -->**Nadlimitní veřejné zakázky na dodávky „Výpočetní cluster VC III" a „HPCQC – AI výpočetní cluster" Zadavatel: Vysoká škola báňská – Technická univerzita Ostrava**

se sídlem Ostrava – Poruba, 17. listopadu 2172/15, PSČ: 708 00, IČ: 61989100, zastoupena prof. RNDr. Václavem Snášelem, CSc., rektorem, profil zadavatele: https://zakazky.vsb.cz/

Kontaktní osoba: Ing. Jan Juřena, tel.: + 420 597 329 579, email: jan.jurena@vsb.cz

# VÝZVA K ÚČASTI NA PŘEDBĚŽNÉ TRŽNÍ KONZULTACI

ve smyslu § 33 zákona č. 134/2016 Sb., o zadávání veřejných zakázek, ve znění pozdějších předpisů (dále jen „ **ZZVZ** ")

Vysoká škola báňská – Technická univerzita Ostrava, se sídlem Ostrava – Poruba, 17. listopadu 2172/15, PSČ: 708 00, IČ: 61989100, jako zadavatel veřejných zakázek s názvem

**„Výpočetní cluster VC III" a „HPCQC – AI výpočetní cluster"**

tímto vyzývá dodavatele

**k účasti na předběžné tržní konzultaci.**

<!-- PAGE 2 -->1. ## 1\. Obecné informace

Zadavatel v souladu s § 33 ZZVZ dává na vědomí, že povede tržní konzultace (dále též „PTK") s cílem připravit zadávací podmínky a informovat dodavatele o svých záměrech a požadavcích a vyzývá dodavatele k účasti na předběžné tržní konzultacích v rámci dvou zadávacích řízení „Výpočetní cluster VC III" a „HPCQC – AI výpočetní cluster". Ačkoliv z technického hlediska mohou být výsledná řešení do jisté míry podobná, bude každý výpočetní systém pořizován na základě samostatného zadávacího řízení, jelikož se jedná o dva samostatné funkční celky. Mezi další důvody patří zejména odlišný způsob financování. Aby zadavatel ověřil své předpoklady o rozsahu poskytovaných služeb a předešel situaci, kdy nastaví zadávací podmínky diskriminačně, nepřiměřeně či na daném trhu nestandardně, hodlá využít institut předběžných tržních konzultací, a to z důvodu:

1. Ověření specifikace předmětu veřejné zakázky a zadávacích podmínek tak, aby nejlépe odpovídaly potřebám zadavatele a současně možnostem trhu,
2. identifikace možných alternativních způsobů splnění potřeb zadavatele,
3. rozšíření informovanosti zadavatele o předmětu veřejné zakázky a o aktuálních možnostech trhu či případných specifických podmínkách plnění z pohledu dodavatelů.

## 1.1 Základní informace o předmětu navazující veřejné zakázky

Zadavatel pro potřeby PTK stanovil soubor požadavků (technických, obchodních a dalších podmínek) týkajících se zamýšleného výpočetního clusteru a snaží se najít optimální způsob, jak tyto potřeby naplnit. Bližší informace o předmětu plnění veřejné zakázky jsou uvedeny v příloze č. 1 této výzvy – Základní požadavky zadavatele na předmět veřejné zakázky. Předpokládaná hodnota navazujícího zadávacího řízení „Výpočetní cluster VC III" činí 195 500 000 Kč. Předpokládaná hodnota navazujícího zadávacího řízení „HPCQC – AI výpočetní cluster" činí 177 000 000 Kč bez DPH. Zakázka „Výpočetní cluster VC III" je financována z prostředků operačního programu Jan Amos Komenský (OP JAK), projekt Modernizace e-INFRA CZ II (CZ.02.01.01/00/23_016/0008329) a vlastních prostředků. Zakázka „HPCQC – AI výpočetní cluster" je financována z prostředků operačního programu Jan Amos Komenský (OP JAK), projekt Centrum pro umělou inteligenci a kvantové výpočty v systémovém výzkumu mozku (registrační číslo: CZ.02.01.01/00/23_029/0008437), akronym CLARA, a z vlastních zdrojů

## 1.2 Podmínky účastni v navazujícím zadávacím řízení

Mimo technických a obchodních (popř. i dalších) podmínek účasti v zadávacím řízení bude zadavatel požadovat předložení dokladů o splnění kvalifikace. Tj. o splnění:

1. základní způsobilosti podle § 74 ZZVZ,
2. ekonomické kvalifikace podle § 77 ZZVZ,
3. technické kvalifikace podle § 79 ZZVZ. Kritéria technické kvalifikace budou stanovena jako seznam významných dodávek předložený dodavatelem. Vymezení významné dodávky bude odpovídat předmětu navazující veřejné zakázky.

<!-- PAGE 3 -->1. ## 2\. Předpokládaný harmonogram

| Ukončení PTK |  | 06/2025 |
| --- | --- | --- |
| Zahájení navazujícího | zadávacího řízení | 07/2025 |
| Uzavření smlouvy |  | 12/2025 |
| Dodávka a akceptace |  | 10/2026 |

1. ## 3\. Způsob vedení tržní konzultace

PTK bude probíhat v českém jazyce. Zadavatel si dále vyhrazuje právo na použití jiného, zejména pak anglického jazyka, při vedení PTK. Zadavatel v souladu s § 36 odst. 4 ZZVZ deklaruje, že pokud bude zadávací dokumentace použitá v navazujícím zadávacím řízení obsahovat informace, které budou výsledkem předběžné tržní konzultace, označí v zadávací dokumentaci tyto informace, identifikuje osoby, které se na předběžné tržní konzultaci podílely, a uvede všechny podstatné informace, které byly obsahem předběžné tržní konzultace. Zadavatel upozorňuje, že do zadávací dokumentace zahrne pouze takové informace, které budou ze strany dodavatele řádně podloženy a odůvodněny.

## 3.1 Návrh výpočetního clusteru

Zadavatel požaduje, aby dodavatel, který má zájem účastnit se PTK, zaslal do **9. 6. 2025** prostřednictvím komunikačního kanálu profilu zadavatele https://zakazky.vsb.cz/contract_display_2061.html nebo prostřednictvím e-mailu na adresu superpocitac@it4i.cz Návrh výpočetního clusteru (dále jen „Návrh"). Uvedený termín může být prodloužen na základě písemné žádosti odeslané prostřednictvím komunikačního kanálu profilu zadavatele nebo na uvedenou e-mailovou adresu nebo.

**Zadavatel žádá všechny účastníky PTK, aby, pokud možno, dodrželi stanovený termín.**

## 3.1.1 Požadovaný obsah Návrhu

Zadavatel požaduje předložení Návrhu pro tři různé systémy:

1. VC III – podrobněji vizte kapitolu 4 přílohy č. 1 této výzvy.
2. HPCQC – AI výpočetní cluster – podrobněji vizte kapitolu 5 přílohy č. 1 této výzvy V případě, že účastník není schopen předložit Návrh pro oba systémy, uvede tuto skutečnost spolu se stručným odůvodněním ve svém Návrhu. Důvody, které účastníka vedly k nemožnosti zpracovat Návrh pro některý ze systémů mohou být různé, např. technické (nedodržení technických požadavků zadavatele), časové (nedodržení termínu plnění), cenové atd. Návrh bude dále obsahovat alespoň:
3. Návrh technického řešení
4. Návrh záruky a servisních služeb
5. Návrh licenčních podmínek upravujících práva a závazky zadavatele k navrhovanému řešení
6. Orientační cenovou kalkulaci navrhovaného řešení Výpočetního clusteru VC III / HPCQC – AI výpočetního clusteru Podrobnosti ohledně obsahu návrhu jsou uvedeny v kapitole 7 přílohy č. 1 této výzvy. Zadavatel zařadí do předběžné tržní konzultace dodavatele, kteří doručí Návrh ve stanoveném termínu.

<!-- PAGE 4 -->## 3.2 Další průběh PTK

Na základě obdržených Návrhů zadavatel provede přehodnocení technických požadavků a odpovídajícím způsobem upraví přílohu č. 1. Následně zadavatel předpokládá vedení individuální konzultace s každým z účastníků PTK. Vyžádá-li si to situace, bude účastníkům poskytnuta upravená příloha č. 1 spolu s výzvou ke změně Návrhů a / nebo k poskytnutí dalších vstupů. Tento postup lze opakovat až do okamžiku, kdy zadavatel dosáhne cílů stanovených v čl. 1 této výzvy. Zadavatel si dále vyhrazuje právo vést předběžné tržní konzultace s využitím písemných elektronických komunikačních prostředků (např. e-mail, komunikační systém REDMINE), telekonference či formou osobního jednání s jednotlivými dodavateli. Ze všech osobních jednání a jednání vedených s využitím telekonference bude pořízen audiovizuální nebo zvukový záznam. Zadavatel si před zahájením jednání vyžádá souhlas dodavatele s pořízením takového záznamu.

_________________________ prof. RNDr. Václav Snášel, CSc. rektor

1. ## 4\. Přílohy

Příloha č. 1 – Základní požadavky zadavatele na předmět veřejné zakázky

Page 1

**Nadlimitní veřejné zakázky na dodávky „Výpočetní cluster VC III" a „HPCQC – AI výpočetní cluster" Zadavatel: Vysoká škola báňská – Technická univerzita Ostrava**

se sídlem Ostrava – Poruba, 17. listopadu 2172/15, PSČ: 708 00, IČ: 61989100, zastoupena prof. RNDr. Václavem Snášelem, CSc., rektorem, profil zadavatele: https://zakazky.vsb.cz/

Kontaktní osoba: Ing. Jan Juřena, tel.: + 420 597 329 579, email: jan.jurena@vsb.cz

# VÝZVA K ÚČASTI NA PŘEDBĚŽNÉ TRŽNÍ KONZULTACI

ve smyslu § 33 zákona č. 134/2016 Sb., o zadávání veřejných zakázek, ve znění pozdějších předpisů (dále jen „ **ZZVZ** ")

Vysoká škola báňská – Technická univerzita Ostrava, se sídlem Ostrava – Poruba, 17. listopadu 2172/15, PSČ: 708 00, IČ: 61989100, jako zadavatel veřejných zakázek s názvem

**„Výpočetní cluster VC III" a „HPCQC – AI výpočetní cluster"**

tímto vyzývá dodavatele

**k účasti na předběžné tržní konzultaci.**

Page 2

## 1\. Obecné informace

Zadavatel v souladu s § 33 ZZVZ dává na vědomí, že povede tržní konzultace (dále též „PTK") s cílem připravit zadávací podmínky a informovat dodavatele o svých záměrech a požadavcích a vyzývá dodavatele k účasti na předběžné tržní konzultacích v rámci dvou zadávacích řízení „Výpočetní cluster VC III" a „HPCQC – AI výpočetní cluster". Ačkoliv z technického hlediska mohou být výsledná řešení do jisté míry podobná, bude každý výpočetní systém pořizován na základě samostatného zadávacího řízení, jelikož se jedná o dva samostatné funkční celky. Mezi další důvody patří zejména odlišný způsob financování. Aby zadavatel ověřil své předpoklady o rozsahu poskytovaných služeb a předešel situaci, kdy nastaví zadávací podmínky diskriminačně, nepřiměřeně či na daném trhu nestandardně, hodlá využít institut předběžných tržních konzultací, a to z důvodu:

1. Ověření specifikace předmětu veřejné zakázky a zadávacích podmínek tak, aby nejlépe odpovídaly potřebám zadavatele a současně možnostem trhu,

1. identifikace možných alternativních způsobů splnění potřeb zadavatele,

1. rozšíření informovanosti zadavatele o předmětu veřejné zakázky a o aktuálních možnostech trhu či případných specifických podmínkách plnění z pohledu dodavatelů.

## 1.1 Základní informace o předmětu navazující veřejné zakázky

Zadavatel pro potřeby PTK stanovil soubor požadavků (technických, obchodních a dalších podmínek) týkajících se zamýšleného výpočetního clusteru a snaží se najít optimální způsob, jak tyto potřeby naplnit. Bližší informace o předmětu plnění veřejné zakázky jsou uvedeny v příloze č. 1 této výzvy – Základní požadavky zadavatele na předmět veřejné zakázky. Předpokládaná hodnota navazujícího zadávacího řízení „Výpočetní cluster VC III" činí 195 500 000 Kč. Předpokládaná hodnota navazujícího zadávacího řízení „HPCQC – AI výpočetní cluster" činí 177 000 000 Kč bez DPH. Zakázka „Výpočetní cluster VC III" je financována z prostředků operačního programu Jan Amos Komenský (OP JAK), projekt Modernizace e-INFRA CZ II (CZ.02.01.01/00/23_016/0008329) a vlastních prostředků. Zakázka „HPCQC – AI výpočetní cluster" je financována z prostředků operačního programu Jan Amos Komenský (OP JAK), projekt Centrum pro umělou inteligenci a kvantové výpočty v systémovém výzkumu mozku (registrační číslo: CZ.02.01.01/00/23_029/0008437), akronym CLARA, a z vlastních zdrojů

## 1.2 Podmínky účastni v navazujícím zadávacím řízení

Mimo technických a obchodních (popř. i dalších) podmínek účasti v zadávacím řízení bude zadavatel požadovat předložení dokladů o splnění kvalifikace. Tj. o splnění:

1. základní způsobilosti podle § 74 ZZVZ,

1. ekonomické kvalifikace podle § 77 ZZVZ,

1. technické kvalifikace podle § 79 ZZVZ. Kritéria technické kvalifikace budou stanovena jako seznam významných dodávek předložený dodavatelem. Vymezení významné dodávky bude odpovídat předmětu navazující veřejné zakázky.

Page 3

## 2\. Předpokládaný harmonogram

| Ukončení PTK |  | 06/2025 |
| --- | --- | --- |
| Zahájení navazujícího | zadávacího řízení | 07/2025 |
| Uzavření smlouvy |  | 12/2025 |
| Dodávka a akceptace |  | 10/2026 |

## 3\. Způsob vedení tržní konzultace

PTK bude probíhat v českém jazyce. Zadavatel si dále vyhrazuje právo na použití jiného, zejména pak anglického jazyka, při vedení PTK. Zadavatel v souladu s § 36 odst. 4 ZZVZ deklaruje, že pokud bude zadávací dokumentace použitá v navazujícím zadávacím řízení obsahovat informace, které budou výsledkem předběžné tržní konzultace, označí v zadávací dokumentaci tyto informace, identifikuje osoby, které se na předběžné tržní konzultaci podílely, a uvede všechny podstatné informace, které byly obsahem předběžné tržní konzultace. Zadavatel upozorňuje, že do zadávací dokumentace zahrne pouze takové informace, které budou ze strany dodavatele řádně podloženy a odůvodněny.

## 3.1 Návrh výpočetního clusteru

Zadavatel požaduje, aby dodavatel, který má zájem účastnit se PTK, zaslal do **9. 6. 2025** prostřednictvím komunikačního kanálu profilu zadavatele https://zakazky.vsb.cz/contract_display_2061.html nebo prostřednictvím e-mailu na adresu superpocitac@it4i.cz Návrh výpočetního clusteru (dále jen „Návrh"). Uvedený termín může být prodloužen na základě písemné žádosti odeslané prostřednictvím komunikačního kanálu profilu zadavatele nebo na uvedenou e-mailovou adresu nebo.

**Zadavatel žádá všechny účastníky PTK, aby, pokud možno, dodrželi stanovený termín.**

## 3.1.1 Požadovaný obsah Návrhu

Zadavatel požaduje předložení Návrhu pro tři různé systémy:

1. VC III – podrobněji vizte kapitolu 4 přílohy č. 1 této výzvy.

1. HPCQC – AI výpočetní cluster – podrobněji vizte kapitolu 5 přílohy č. 1 této výzvy V případě, že účastník není schopen předložit Návrh pro oba systémy, uvede tuto skutečnost spolu se stručným odůvodněním ve svém Návrhu. Důvody, které účastníka vedly k nemožnosti zpracovat Návrh pro některý ze systémů mohou být různé, např. technické (nedodržení technických požadavků zadavatele), časové (nedodržení termínu plnění), cenové atd. Návrh bude dále obsahovat alespoň:

- Návrh technického řešení

- Návrh záruky a servisních služeb

- Návrh licenčních podmínek upravujících práva a závazky zadavatele k navrhovanému řešení

- Orientační cenovou kalkulaci navrhovaného řešení Výpočetního clusteru VC III / HPCQC – AI výpočetního clusteru Podrobnosti ohledně obsahu návrhu jsou uvedeny v kapitole 7 přílohy č. 1 této výzvy. Zadavatel zařadí do předběžné tržní konzultace dodavatele, kteří doručí Návrh ve stanoveném termínu.

Page 4

## 3.2 Další průběh PTK

Na základě obdržených Návrhů zadavatel provede přehodnocení technických požadavků a odpovídajícím způsobem upraví přílohu č. 1. Následně zadavatel předpokládá vedení individuální konzultace s každým z účastníků PTK. Vyžádá-li si to situace, bude účastníkům poskytnuta upravená příloha č. 1 spolu s výzvou ke změně Návrhů a / nebo k poskytnutí dalších vstupů. Tento postup lze opakovat až do okamžiku, kdy zadavatel dosáhne cílů stanovených v čl. 1 této výzvy. Zadavatel si dále vyhrazuje právo vést předběžné tržní konzultace s využitím písemných elektronických komunikačních prostředků (např. e-mail, komunikační systém REDMINE), telekonference či formou osobního jednání s jednotlivými dodavateli. Ze všech osobních jednání a jednání vedených s využitím telekonference bude pořízen audiovizuální nebo zvukový záznam. Zadavatel si před zahájením jednání vyžádá souhlas dodavatele s pořízením takového záznamu.

_________________________ prof. RNDr. Václav Snášel, CSc. rektor

## 4\. Přílohy

Příloha č. 1 – Základní požadavky zadavatele na předmět veřejné zakázky
Ukončení PTK06/2025
Zahájení navazujícíhozadávacího řízení07/2025
Uzavření smlouvy12/2025
Dodávka a akceptace10/2026
06_PTK/Okruhy_pro_diskizi_PTK.docx 2 pages · 0 tables
<!-- PAGE 1 -->Okruhy pro diskuzi v PTK **„Výpočetní cluster VC III“ a „HPCQC – AI výpočetní cluster“**

1. Efektivita chlazení

Připravte prosím informace o dostupnosti řešení (vhodné modelové řady pro vhodné výpočetní technologie), kde výpočetní servery využívají chlazení pomocí DLC s odvodem tepla do DLC okruhu v hodnotě 80 % a více z celkově generovaného tepla při vstupní teplotě chladící kapaliny cca. 38 °C. 

1. Přístupové servery s akcelerátory pro inferenci

Připravte prosím návrh řešení Přístupových serverů (login uzly) s použitím GPU stejné architektury jako u výpočetních serverů, kde GPU by byla z modelové řady vhodné pro primárně pro inferenci. Servery mohou mít jiný formát provedení (modelová řada), než jsou navrhované výpočetní servery. Počet inferenčních karet by měl být v rozsahu 1-2 GPU. 

1. Datové úložiště SCRATCH

Připravte prosím návrh řešení datového úložiště SCRATCH s nově definovanými klíčovými výkonnostními parametry:

1. Kapacita celkem 2PB (použitelná uživatelem na úrovni souborového systému)
2. Dlouhodobá agregovaná propustnost pro operace: Zápis 600 GB/s, Čtení 750 GB/s
3. Dlouhodobý agregovaný výkon vstupně výstupních operací: 5000 kIOP/s

1. Připojení výpočetních serverů do výpočetní sítě

Připravte prosím návrh řešení, tak aby jeden výpočetní server dimenzován se 4 GPU byl do výpočetní sítě připojen celkovým agregovaným výkonem 800 Gb/s. Uveďte prosím počet a typ použitých síťových adaptérů a počet linek mezi výpočetním serverem a přepínačem (nebo uveďte počet použitých portů na přepínači jedním serverem). Uveďte prosím Vaše stanovisko k danému poměru propustnosti a výkonu výpočetního serveru (tedy poměr 4 GPU : 800 Gb/s propustnosti).

1. Topologie výpočetní sítě

Připravte prosím návrh řešení s požadavkem na 16 neblokujících serverů v rámci jednoho ostrovu výpočetní sítě (snížení požadavku z 32 neblokujících serverů). Uveďte prosím, zda-li takto definovaný požadavek nemá z Vašeho pohledu negativní dopady na návrh řešení a výpočetní výkon celého řešení.

1. Výpočetní servery na platformě AMD

Připravte prosím návrh řešení výpočetních serverů s použitím 4x GPU na platformě AMD. Uveďte prosím odhadovanou velikost partice s výpočetními servery v rámci dostupného rozpočtu.

1. Akcelerace kvantového simulátoru na platformě AMD GPU

S ohledem na uvedená možná řešení softwarového simulování kvantových počítačů s pomocí akcelerace na GPU kartách firmy AMD, uveďte prosím technické detaily o softwarové platformě, úrovni akcelerace (částečný/úplný běh na GPU), škálování/sizing na daném typu AMD GPU (počet qubitů – vztah k velikosti operační paměti GPU), referenci nasazení (velikost, uživatel/centrum).

S ohledem na body 1-7 prosím připravte dopad na cenovou kalkulaci ve stejném formátu jako pro původní návrh řešení (viz „Orientační cenová kalkulace“).

Page 1

Okruhy pro diskuzi v PTK** „Výpočetní cluster VC III“ a „HPCQC – AI výpočetní cluster“**

1. Efektivita chlazení

Připravte prosím informace o dostupnosti řešení (vhodné modelové řady pro vhodné výpočetní technologie), kde výpočetní servery využívají chlazení pomocí DLC s odvodem tepla do DLC okruhu v hodnotě 80 % a více z celkově generovaného tepla při vstupní teplotě chladící kapaliny cca. 38 °C. 

2. Přístupové servery s akcelerátory pro inferenci

Připravte prosím návrh řešení Přístupových serverů (login uzly) s použitím GPU stejné architektury jako u výpočetních serverů, kde GPU by byla z modelové řady vhodné pro primárně pro inferenci. Servery mohou mít jiný formát provedení (modelová řada), než jsou navrhované výpočetní servery. Počet inferenčních karet by měl být v rozsahu 1-2 GPU. 

3. Datové úložiště SCRATCH

Připravte prosím návrh řešení datového úložiště SCRATCH s nově definovanými klíčovými výkonnostními parametry:

  1. Kapacita celkem 2PB (použitelná uživatelem na úrovni souborového systému)
  2. Dlouhodobá agregovaná propustnost pro operace: Zápis 600 GB/s, Čtení 750 GB/s
  3. Dlouhodobý agregovaný výkon vstupně výstupních operací: 5000 kIOP/s

4. Připojení výpočetních serverů do výpočetní sítě

Připravte prosím návrh řešení, tak aby jeden výpočetní server dimenzován se 4 GPU byl do výpočetní sítě připojen celkovým agregovaným výkonem 800 Gb/s. Uveďte prosím počet a typ použitých síťových adaptérů a počet linek mezi výpočetním serverem a přepínačem (nebo uveďte počet použitých portů na přepínači jedním serverem). Uveďte prosím Vaše stanovisko k danému poměru propustnosti a výkonu výpočetního serveru (tedy poměr 4 GPU : 800 Gb/s propustnosti).

5. Topologie výpočetní sítě

Připravte prosím návrh řešení s požadavkem na 16 neblokujících serverů v rámci jednoho ostrovu výpočetní sítě (snížení požadavku z 32 neblokujících serverů). Uveďte prosím, zda-li takto definovaný požadavek nemá z Vašeho pohledu negativní dopady na návrh řešení a výpočetní výkon celého řešení.

6. Výpočetní servery na platformě AMD

Připravte prosím návrh řešení výpočetních serverů s použitím 4x GPU na platformě AMD. Uveďte prosím odhadovanou velikost partice s výpočetními servery v rámci dostupného rozpočtu.

7. Akcelerace kvantového simulátoru na platformě AMD GPU

Page 2

S ohledem na uvedená možná řešení softwarového simulování kvantových počítačů s pomocí akcelerace na GPU kartách firmy AMD, uveďte prosím technické detaily o softwarové platformě, úrovni akcelerace (částečný/úplný běh na GPU), škálování/sizing na daném typu AMD GPU (počet qubitů – vztah k velikosti operační paměti GPU), referenci nasazení (velikost, uživatel/centrum).

S ohledem na body 1-7 prosím připravte dopad na cenovou kalkulaci ve stejném formátu jako pro původní návrh řešení (viz „Orientační cenová kalkulace“).
Source and processing details
File fetched
17 Nov 2026, 13:20
Text extracted
15 Nov 2026, 11:10
Parser version
xberg-1.0.14:markdown-pages-tables-ces-eng-v2
File fingerprint (SHA-256)
d19d3907f1f24db521b5038f7b31dc7f453fdc87fef072750476aad16c1b7f42

cz.profile.xml · HPCQC-AI výpočetní cluster ↗

About document collection

Original files remain with the publisher. Newly collected IT document links enter the reading queue, which runs every five minutes. The full catalog is reconciled hourly; known files are due for a daily check, subject to the queue and each source’s refresh schedule.

A failed update retains the last successful text. Some publisher links lead to web pages rather than attachments. Extracted qualification facts support source review; they are not an eligibility decision.