Společnost Pure Storage představila systém FlashBlade//EXA. Jedná se o nejvýkonnější platformu pro ukládání dat, která byla navržena pro nejnáročnější požadavky umělé inteligence (AI) a další vysoce výkonná výpočetní prostředí (clustery HPC). Zatímco starší přístupy k ukládání dat brzdily potenciál umělé inteligence, platforma FlashBlade//EXA dokáže překonat úzké hrdlo v podobě metadat. Děje se tak díky osvědčené architektuře založené na úložných systémech FlashBlade, která je vytvořena pro masivně paralelní zpracování a obrovské množství operací s metadaty, což je typické pro rozsáhlé pracovní úlohy umělé inteligence a HPC. Předběžné testování ukázalo, že FlashBlade//EXA dosahuje rychlosti více než 10 terabajtů za sekundu při čtení v jediném jmenném prostoru, čímž jako nejvýkonnější úložné řešení v oboru nastavuje novou úroveň výkonu.
Architektura FlashBlade//EXA škáluje data a metadata nezávisle na sobě; téměř neomezené škálování poskytuje pomocí předpřipravených datových uzlů třetích stran, které umožňují vysoce škálovatelný výkon dle různých kritérií. Použití standardních protokolů a síťových technologií navíc snižuje složitost nasazení, správy i škálování.
Výkonnější grafické procesory zvýšily rychlost i rozsah trénování základních modelů umělé inteligence. Prudký nárůst velikosti a sofistikovanosti modelů vede ke změně paradigmatu v požadavcích na úložiště. Řešení úložiště musí být schopno plynule držet krok s výpočetní náročností, objemem i rozmanitostí datových požadavků AI a HPC.
Starší úložné systémy nebyly navrženy tak, aby vyhovovaly současným nárokům umělé inteligence. Při použití pro rozsáhlé AI a HPC narážejí tyto systémy na kritická omezení v oblasti souběžného čtení a zápisu i výkonu při zpracování metadat. Nedokáží zajistit velmi nízkou latenci, asynchronní checkpointing (ochranu proti chybám) a předvídatelnou vysokou propustnost.
Moderní úložné řešení musí poskytovat masivně paralelní, disagregovanou (oddělující výkon a kapacitu) architekturu, která zajistí flexibilitu ve velkém měřítku. Pouze takové úložiště pomůže zrychlit tempo úloh AI.
Moderní architektura úložiště pro úlohy umělé inteligence a HPC
Starší architektury vysoce výkonných úložišť byly optimalizovány pro tradiční prostředí HPC s předvídatelnějšími a pravidelnějšími pracovními zátěžemi a se zaměřením na škálování hrubého výkonu. Dnešní pracovní zátěže AI jsou naproti tomu komplexní a multimodální (víceúčelové), zahrnují mj. práci s textem, obrázky i videem a zpracovávají je současně desítky tisíc grafických procesorů (GPU). Tento posun vyžaduje pokročilou optimalizaci metadat spolu s masivním škálováním výkonu. Jen tak je možné efektivně spravovat různé typy dat a vysokou souběžnost procesů.
Platforma FlashBlade//EXA je přímo navržena a připravena pro výzvy pracovních úloh AI. Disagregovaná, masivně paralelní architektura umožňuje flexibilitu úložiště ve velkém měřítku. Podniky se mohou přizpůsobit vyvíjejícím se multimodálním modelům, optimalizovat spolehlivost a eliminovat dobu nečinnosti, aby urychlily trénování a odvozování (inferenci) modelů AI a zároveň zlepšily využití GPU. Kombinace metadatového enginu Pure Storage a operačního systému Purity s cenově výhodnými a standardními datovými uzly navíc umožňuje podnikům dosáhnout bezkonkurenčního poměru cena/výkon.
Hlavní vlastnosti FlashBlade//EXA podle Pure:
• Poskytne špičkový škálovatelný výkon a využije osvědčené možnosti práce s metadaty v produktech Pure Storage k maximalizaci efektivity celého toku AI a k minimalizaci zpoždění při workflow tréninkových a inferenčních úloh.
◦ Umožní výkon dle více kritérií („vícerozměrný“) s masivně paralelním zpracováním a škálovatelnými metadaty na vstupu i výstupu (IOPS) pro podporu vysokorychlostních požadavků na AI. Poskytování více než 10 terabajtů za sekundu v jediném jmenném prostoru přináší nejlepší výkon v oboru.
• Sníží složitost správy odstraněním úzkých míst v metadatech.
◦ Poskytne vysoký výkon, dostupnost a odolnosti metadat pro zpracování masivních datových sad AI bez nutnosti ručního ladění nebo dodatečné konfigurace.
• Urychlí inovace v oblasti AI díky vysoce konfigurovatelné a disagregované architektuře.
◦ Podpoří vyvíjející se prostředí AI a HPC pomocí standardních průmyslových protokolů.
◦ Bude zahrnovat vysokorychlostní síťové karty NVIDIA ConnectX, přepínače Spectrum, kabely LinkX a akcelerované knihovny pro síťovou komunikaci.
Očekává se, že platforma FlashBlade//EXA bude k dispozici v létě r. 2025.
„Platforma FlashBlade//EXA přináší masivně paralelní architekturu, která umožňuje nezávislé škálování dat a metadat a poskytuje zákazníkům bezkonkurenční výkon, škálovatelnost a přizpůsobivost pro největší a nejnáročnější datová prostředí na světě. Úložiště nyní zrychluje tempo vývoje rozsáhlých nasazení HPC a AI,“ uvedl Rob Lee, technologický ředitel společnosti Pure Storage.
„Umělá inteligence narušila trh s úložišti dat. Starší úložná prostředí nejsou schopna zvládnout masivní paralelismus vyžadovaný AI a HPC. Moderní úložné a datové platformy musí nepřetržitě zásobovat daty grafické procesory a akcelerátory, které trénují rozsáhlé základní modely, a podporovat nejnáročnější pracovní zátěže. S vysoce výkonnými úložišti však přichází také složitost. V případě řešení FlashBlade//EXA využívá společnost Pure Storage své desetileté zkušenosti s uvolňováním potenciálu výkonu metadat a zároveň abstrahuje od složitosti spojené se správou těchto prostředí. Pokud platforma FlashBlade//EXA splní to, co slibuje, přinese organizacím všech velikostí skutečnou hodnotu,“ dodal Matt Kimball, viceprezident a hlavní analytik společnosti Moor Insights & Strategy.
