Superpočítač SGI Brain analyzoval data z Twitteru v reálném čase

20. listopad 2012 08:38 0 komentářů

Společnost SGI (NASDAQ: SGI), ověřený lídr v oblasti technických výpočtů, která spolupracuje s Kalevem H. Leetaru z Univerzity v Illinois a Dr. Shaowenem Wangem z Laboratoře kyberinfrastruktury a geodetických informací (CyberInfrastructure and Geospatial Information - CIGI) při Univerzitě v Illinois v Urbana-Champaign na vytvoření globálního tlukotu srdce internetové služby Twitter, na vůbec první geografické, populační, charakterové analýze v reálném čase a vizualizaci „tweetů“ (zpráviček) na počítači SGI UV 2000 nazývaného též „Big Brain“.

Schopnost analyzovat velké objemy dat v reálném čase a sofistikovanějšími způsoby umožňuje organizacím, od vládních po podnikové, získat okamžité a akceschopné vstupy, použitelné pro velké množství aplikací. Díky této možnosti se mohou výzkumní pracovníci, vědci a inženýři, kteří se potýkají s neustále rostoucími datově-náročnými problémy, rychle přesouvat od údajů k pochopení problému.

Projekt globálního tlukotu srdce službyTwitter zpracovává tok 10% tweetů, kterých je na Twitteru denně vystaveno 500 milionů, a to vše v reálném čase. Projekt analyzuje každý tweet, přiřazuje mu polohu (nejen skrz GPS značku tweetu, ale zpracováním textu samotného tweetu), charakterovou hodnotu, a potom vizualizuje konverzaci v infografické tepelné mapě, která zobrazuje tweetovou polohu, hustotu a charakter do jednotné geoprostorové perspektivy. Díky systému SGI UV běží celý proces od příjmu k analýze dat a tepelné mapě rychlostí, která umožňuje vizualizaci mapového rámce za sekundu.

Projekt zkoumal dvě nedávné, významné události - hurikán Sandy a prezidentské volby v USA. V obou případech byly poslány milióny tweetů, které činily ze služby Twitter významnou platformu pro komunikaci o tom, co se v každém okamžiku dělo.

V případě amerických prezidentských voleb, jakmile byly publikovány predikce o Obamově vítězství, hlásil Twitter 327.452 tweetů za minutu. Tweet o vítězství od prezidenta Obamy se rychle stal nejvíce retweetovanou/preposielanou zprávou v historii. Tohoto rekordu bylo dosaženo během pouhých 22 minut poté, co byl tweet vystaven1.

Jak je patrné z animací tepelných map ve sledovaném období, příjemci zpráv jsou schopni oživovat události, jak k nim docházelo na Twitteru. Projekt sledoval masivní nárůst provozu Twitteru jakmile se přiblížil hurikán Sandy, poté co udeřil a zasáhl celé východní pobřeží Spojených států. V případě amerických prezidentských voleb ukázaly tepelné mapy dynamiku intenzity a polohu tweetů příznivých buď pro prezidenta Baracka Obamu nebo guvernéra Mitta Romneyho v průběhu volebního dne od prvotního otevření volebních místností až po vítězný projev prezidenta Obamy.

"Tento způsob analýzy dat v reálném čase je jako mít v rukou nový dalekohled. Jsme svědky prvního náhledu na Twittersféru tímto způsobem a nejsme si ještě úplně jisti, jaký je smysl toho všeho, a jaká je vypovídací hodnota, ale umožňuje nám to poprvé nahlédnout do komplikovaného, chaotického světa, který je tlukoucím srdcem naší společnosti," sdělil Leetaru. "Systém SGI UV umožňuje uživatelům pozměnit tradiční přístup jakým dospívají ve svých myšlenkách k rozhodnutím a dává jim možnost získávat poznatky, jak se průběžně dějí, a mění je v něco, co bych nazval "post-demografickým"světem, v němž můžeme vidět lidské naděje i strachy člověka po člověku v reálném čase, spíše než jen jejich uvedení do pevných demografických označení."

SGI UV: počítač Big Brain

Systém SGI UV 2000 je světově největším data-miningovým nástrojem, na kterém může běžet až 4096 jader a může škálovat do rozsahu až 64TB cache-koherentní sdílené paměti při špičkovém zatížení I/O kanálů rychlostí čtyř terabajtů za sekundu (14 PB/hod). Systém by mohl zpracovat celý tištěný obsah americké knihovny kongresu za méně než tři vteřiny. S architekturou SGI UV2 můžete začít v malém měřítku se 16 jádry a 32GB paměti a postupně, hladce rozšiřovat. Systém SGI UV je využíván pro vysoce výkonné datové analýzy v oblastech výzkumu jako je kosmologie a genomika až po komerční aplikace pro odhalování podvodů.

"Jsme hrdí na to, že přinášíme vědcům, datovým analytikům a inženýrům nástroje a technologie, které jim umožní najít odpovědi na jejich nejnáročnější problémy," uvedl Jorge Titinger, prezident a CEO společnosti SGI. "Porozumění oblasti Big Data vyžaduje více než kolik mohou nabídnout tradiční přístupy analýzy dat a přesouvá se do sféry vysoce výkonných analytických údajů, kde můžete v reálném čase proměnit údaje na skutečné dolary a centy pro každou organizaci."

Přečtěte si více o SGI UV a o řešeních SGI Big Data na sgi.com.


Komentáře

RSS 

Komentujeme

Skutečně software pohltí svět?

Pavel Houser , 22. duben 2017 14:00
Pavel Houser

Výrok, podle něhož má software pojídat svět, jako první použil (zřejmě) Marc Andreessen v roce 2011 ...

Více





RSS 

Zprávičky

Jihokorejští výrobci elektroniky Samsung a LG prudce zvýšili zisk

ITBiz.cz , 28. duben 2017 07:00

Jihokorejští výrobci elektroniky Samsung Electronics a LG Electronics v letošním prvním čtvrtletí vý...

Více 0 komentářů

O digitální transformaci usiluje více než polovina českých podniků

Pavel Houser , 27. duben 2017 18:39

Spojení IoT a AI: Zařízení internetu věcí generují velké objemy dat, které mají bez rychlého zpracov...

Více 0 komentářů

Twitter snížil čtvrtletní ztrátu na 61,6 milionu dolarů

ČTK , 27. duben 2017 15:30

Čtvrtletní ztráta americké internetové společnosti Twitter se meziročně snížila na 61,6 milionu dola...

Více 0 komentářů

Starší zprávičky

Vláda indického Kašmíru zakázala na měsíc sociální sítě

ČTK , 27. duben 2017 13:00

Vláda indického státu Džammú a Kašmír nařídila nejméně na měsíc blokádu sociálních sítí na kašmírské...

Více 0 komentářů

FlashStation pro analýzu velkých objemů dat

Pavel Houser , 27. duben 2017 11:54

Synology představuje zařízení FlashStation FS2017 Podle dodavatele jde o server NAS typu all-flash ...

Více 0 komentářů

Čtvrtletní zisk Samsungu stoupl téměř o polovinu, LG rostla ještě víc

ČTK , 27. duben 2017 10:00

Ve druhém čtvrtletí by měl výsledky dále podpořit nový Galaxy 8....

Více 0 komentářů

Kamery pro systémy SCADA

Pavel Houser , 27. duben 2017 09:00

Axis uvádí na trh kamery chráněné proti výbuchu pro rychlé zvládání nehod a efektivní běh kriticky n...

Více 0 komentářů