DNS s IBM o HPC: IBM Power a Storwize v praxi

Richard Jan Voigts , 28. prosinec 2015 13:00 0 komentářů
Rubriky: Technologie, Hardware
DNS s IBM o HPC: IBM Power a Storwize v praxi

Na přelomu roku uspořádaly společnosti DNS, distributor s přidanou hodnotou, a IBM seminář, který přítomné seznámil s aktuálními trendy v oblasti HPC (High Performance Computing), a to zejména ve sféře technologií IBM, konkrétně serverové platformy Power, storage technologií IBM Storwize a StorageOne. Nechyběly ani příklady jejich nasazení v praxi.

Po úvodním slovu Luboše Kvapila z DNS seznámil Aleš Komárek, rovněž z DNS, s novinkami z konference Supercomputing 2015 z Austinu, samozřejmě ohledně HPC a platformy IBM Power.

HPC v podání IBM a konsorcia OpenPower

Radek Špimr z IBM hovořil o platformě IBM Power, která se má vracet na výsluní světa HPC (High Power Computing). IBM totiž společně s partnery s konsorcia OpenPower vyvíjí technologie, které umožňují zásadním způsobem zrychlovat výpočty a zároveň snižovat energetickou náročnost prostředí HPC. Mezi nejvýznamnější zákazníky a partnery technologií IBM Power ve světě HPC nepatří jen známé sdružení amerických HPC center CORAL po ministerstvem energetiky DoE, ale i francouzské GENCI nebo anglické STFC a řada dalších veličin HPC, jako například evropské E4 Computer Engineering nebo americký Penguin Computing, který již vyrábí své servery HPC na bázi Power, a v neposlední řadě i obrovské zázemí v Číně a Asii.

Konsorcium OpenPower
Konsorcium OpenPower

IBM začala dodávat první vlnu serverů OpenPower s procesory Power8 vyráběných ve spolupráci s partnery Tyan a Nvidia pod označením LC, jako interconnect a standardně jsou také používány technologie dalšího partnera Mellanox.

Inovace a trendy v HPC

IBM a OpenPower dnes i v HPC světě znamenají zejména inovace, které obohacují a dosti zásadním urychlují evoluci prostředí HPC. Mezi hlavní trendy v oblasti HPC, které IBM adresuje, patří:

Hybridní computing – úzké propojení klasických procesorů Power s akcelerátory GPU pro masivní paralelní zpracování od Nvidie. V následujících generacích dojde na propojení po superrychlé sběrnici NVLink, aktuálně po PCIe. Hybridní kombinace umožní několikanásobné zvýšení výkonu při zachování stávající spotřeby energie.

IBM Power a Nvidia
IBM Power a Nvidia

Cloud a bezpečnost pro HPC výpočty – obecně cloud není vhodný pro HPC kvůli variabilním požadavkům na infastrukturu, nicméně za určitých okolností, kdy budou v cloudovém prostředí implementovány nejrychlejší I/O a síťové technologie, lze výpočty spouštět i zde, například na serverech OpenPower. Otázka bezpečnosti a důvěrnosti dat v cloudu je ale v případě HPC ještě více nasnadě a očekávají se i určité regulační kroky s ohledem na bezpečnost.

Big data a internet věcí (IoT) – i tyto technologie budou zasahovat i do světa HPC, technologie big data budou pomáhat při přípravě dat pro výpočty HPC, nebo rozšiřovat analyzovaná data o nové informační zdroje.

Výkon a spotřeba energie pro HPC – jedním z nejvýznamnějších trendů je dramatický nárůst výkonu s minimálním dopadem na spotřebu energie. To znamená, že hardware HPC pro následujících tři až pět let let musí být několikanásobně rychlejší, při současném zachování aktuální spotřeby energie. To vše mají splňovat procesory IBM Power9, integrované přes NVLink další generace s Nvidia Volta GPU. Zároveň IBM představila už v roce 2015 společně se Samsungem, Global Foundries, jako první unikátní 7nm technologii na výrobu procesorových čipů, kterou zatím nikdo jiný nedisponuje. V těchto technologiích tedy zřejmě bude konsorcium okolo IBM i v blízké budoucnosti jediným dodavatelem těchto technologií, které se bezesporu uplatní i ve světě HPC.

Servery Penguin Computing Power
Servery Penguin Computing Power

Nový a specifický software – jediná věc, která se ve světě HPC několik desítek let zásadně neproměnila, je software, a proto v této oblasti IBM očekává největší změny. Speciální software a překladače umožňující plně využít hybridních systémů CPU a GPU, přenesení určitých částí výpočtu na speciální hardwarové akcelerátory během normálního výpočtu, nebo výpočty umožňující zpracovávat i data pořízená technologiemi pro big data nebo informace z internetu věcí. S tím samozřejmě souvisí i možná bezpečnostní rizika, která by mohla být v budoucnu řešena různými oficiálními regulacemi.

Těsné svázání HPC se storage

Rudolf Hruška, který má v IBM na starosti oblast storage, zdůraznil úlohu ukládání velkých objemů dat. High Performance Computing (HPC) je totiž v informačních technologiích oblast, která je zejména velice úzce svázána s vědeckými aplikacemi, jež mají za úkol poodhalit roušku tajemství z dění v přírodě, v lidském těle, ve společnosti i ve vesmíru.

Tyto aplikace vyžadují analýzy nesmírného množství dat, která jsou obvykle experimentální povahy a jsou výsledkem kolekce a měření z různých sofistikovaných přístrojů a zařízení. Musejí být proto také uložena na spolehlivá datová média. Například běžící experimenty v oblasti fyziky generují datové toky až desítky gigabytů za sekundu, což představuje nároky na uložení v řádech stovek terabytes až petabytes za den. Úložiště dat pro HPC

IBM Power a Nvidia pro CORAL, nástupce superpočítače Titan
IBM Power a Nvidia pro CORAL, nástupce superpočítače Titan

Kvůli těmto extrémním nárokům jsou datová úložiště pro HPC specifická. Požadavky na ně jsou charakterizovány velkou škálovatelností, a to nejen v oblasti vlastní kapacity, ale i výkonnosti. Výkon se musí příslušně navyšovat s tím, jak se navyšuje kapacita dat. Na druhé straně je kladen velký důraz i na cenovou efektivitu. Proto se tato úložiště snaží využít různé typy datových médií. Nejen velkokapacitní, relativně drahé magnetické disky, ale dokonce i páskové technologie, které při vhodném zapojení a za pomoci chytrých softwarových komponent, umožňují vytvořit jedno společné úložiště.

Magnetické datové pásky mají větší kapacity (dnes až 10 TB) a představují mnohonásobně nižší cenu za jednotku uložení. Vhodné workflow pak zajistí, že data jsou podle zvolených politik ukládána na příslušnou kapacitní vrstvu podle nároků na výkon a cenu za jejich uložení. Toto workflow, které se nazývá hierarchický storage management, zároveň i zajistí migrace dat v prostoru úložiště, opět podle zvolených politik. Pásková část pak slouží jako pracovní dlouhodobý archiv, jehož data jsou však permanentně dostupná pro potřebu zpracování. V tomto případě se opět automatizovaným způsobem přesunou na rychlejší diskovou část úložiště.

Bouřlivý nástup flashových technologií nenechal samozřejmě bez povšimnutí ani svět HPC. Flashová média se však využívají primárně jako místo pro uložení metadat souborových systémů. Vzhledem k obrovským velikostem těchto globálních paralelních file-systémů s velkým množstvím souborů, je rychlé zpracování metadat jedním z klíčových elementů optimálního návrhu architektury úložiště.

DNS a IBM: Seminář o HPC
DNS a IBM: Seminář o HPC

Příkladem může být úložiště HPC, které vybudovala společnost IBM pro podporu vědecké instalace v DESY (Deutsche Synchrotron) v Hamburku. DESY zkoumá fyzikální jevy za pomoci urychlovače částic. V následujícím odkaze uživatel popisuje problémy, se kterými se v rámci projektu setkal, a jakým způsobem IBM pomohla tyto úkoly vyřešit: https://www.youtube.com/watch?v=JLCj4jQI3q8.

Příklady storage pro HPC z praxe

Zkušenosti s nasazením storage pro HPC přednesl Luboš Korbel, IBM Storage One, a to ohledně Storwize V7000 U na ČVUT v Praze.

Závěrečné slovo měl Petr Plodík z DNS, který má na starosti kompletní portfolio IBM – hardware i software.


Komentáře


RSS 

Komentujeme

Chatbot mluví za mrtvého – od nápadu k realizaci

Pavel Houser , 30. listopad 2016 13:00
Pavel Houser

Na webu The Verge popsala Casey Newton příběh dvou přátel (Eugenia Kuyda a Roman Mazurenko). Peripet...

Více





Kalendář


RSS 

Zprávičky

Americká GoDaddy koupí evropský webhosting Host Europe

ČTK , 06. prosinec 2016 16:00

Americký registrátor internetových domén GoDaddy, který je ve svém oboru největší na světě, se dohod...

Více 0 komentářů

Ruská Centrální banka oznámila masivní útok hackerů

ČTK , 06. prosinec 2016 11:00

Do systému ruské Centrální banky se letos dostali hackeři a s pomocí zfalšovaných hesel se pokusili ...

Více 0 komentářů

CETIN vydal dluhopisy za 25 miliard Kč

ČTK , 05. prosinec 2016 18:00

Česká telekomunikační infrastruktura (CETIN) upsala dluhopisy v eurech a korunách v celkovém objemu ...

Více 1 komentářů

Starší zprávičky

Nahradí otisky prstů přístupová hesla?

ČTK , 05. prosinec 2016 14:30

Zní to jako skvělý nápad: zapomeňte na hesla a zamykejte telefon místo nich otiskem svého prstu. Je ...

Více 1 komentářů

Počítač a internet má na jižní Moravě více než 75 pct domácností

ČTK , 05. prosinec 2016 10:30

Počet jihomoravských domácností, které mají počítač a přístup k internetu, se loni přehoupl na jižní...

Více 0 komentářů

Vodafone zvýšil do září počet zákazníků na 3,54 milionu

ČTK , 04. prosinec 2016 18:00

Mobilní operátor Vodafone zvýšil do konce září počet zákazníků na českém trhu meziročně o 146.000 na...

Více 0 komentářů

Nový škodlivý program ukradl údaje k milionu účtů Google

ČTK , 02. prosinec 2016 14:00

Nový škodlivý program Goolian narušil bezpečnost více než jednoho milionu účtů Google. Šíří se na za...

Více 1 komentářů