Superpočítač SGI Brain analyzoval data z Twitteru v reálném čase

20. listopad 2012 08:38 0 komentářů

Společnost SGI (NASDAQ: SGI), ověřený lídr v oblasti technických výpočtů, která spolupracuje s Kalevem H. Leetaru z Univerzity v Illinois a Dr. Shaowenem Wangem z Laboratoře kyberinfrastruktury a geodetických informací (CyberInfrastructure and Geospatial Information - CIGI) při Univerzitě v Illinois v Urbana-Champaign na vytvoření globálního tlukotu srdce internetové služby Twitter, na vůbec první geografické, populační, charakterové analýze v reálném čase a vizualizaci „tweetů“ (zpráviček) na počítači SGI UV 2000 nazývaného též „Big Brain“.

Schopnost analyzovat velké objemy dat v reálném čase a sofistikovanějšími způsoby umožňuje organizacím, od vládních po podnikové, získat okamžité a akceschopné vstupy, použitelné pro velké množství aplikací. Díky této možnosti se mohou výzkumní pracovníci, vědci a inženýři, kteří se potýkají s neustále rostoucími datově-náročnými problémy, rychle přesouvat od údajů k pochopení problému.

Projekt globálního tlukotu srdce službyTwitter zpracovává tok 10% tweetů, kterých je na Twitteru denně vystaveno 500 milionů, a to vše v reálném čase. Projekt analyzuje každý tweet, přiřazuje mu polohu (nejen skrz GPS značku tweetu, ale zpracováním textu samotného tweetu), charakterovou hodnotu, a potom vizualizuje konverzaci v infografické tepelné mapě, která zobrazuje tweetovou polohu, hustotu a charakter do jednotné geoprostorové perspektivy. Díky systému SGI UV běží celý proces od příjmu k analýze dat a tepelné mapě rychlostí, která umožňuje vizualizaci mapového rámce za sekundu.

Projekt zkoumal dvě nedávné, významné události - hurikán Sandy a prezidentské volby v USA. V obou případech byly poslány milióny tweetů, které činily ze služby Twitter významnou platformu pro komunikaci o tom, co se v každém okamžiku dělo.

V případě amerických prezidentských voleb, jakmile byly publikovány predikce o Obamově vítězství, hlásil Twitter 327.452 tweetů za minutu. Tweet o vítězství od prezidenta Obamy se rychle stal nejvíce retweetovanou/preposielanou zprávou v historii. Tohoto rekordu bylo dosaženo během pouhých 22 minut poté, co byl tweet vystaven1.

Jak je patrné z animací tepelných map ve sledovaném období, příjemci zpráv jsou schopni oživovat události, jak k nim docházelo na Twitteru. Projekt sledoval masivní nárůst provozu Twitteru jakmile se přiblížil hurikán Sandy, poté co udeřil a zasáhl celé východní pobřeží Spojených států. V případě amerických prezidentských voleb ukázaly tepelné mapy dynamiku intenzity a polohu tweetů příznivých buď pro prezidenta Baracka Obamu nebo guvernéra Mitta Romneyho v průběhu volebního dne od prvotního otevření volebních místností až po vítězný projev prezidenta Obamy.

"Tento způsob analýzy dat v reálném čase je jako mít v rukou nový dalekohled. Jsme svědky prvního náhledu na Twittersféru tímto způsobem a nejsme si ještě úplně jisti, jaký je smysl toho všeho, a jaká je vypovídací hodnota, ale umožňuje nám to poprvé nahlédnout do komplikovaného, chaotického světa, který je tlukoucím srdcem naší společnosti," sdělil Leetaru. "Systém SGI UV umožňuje uživatelům pozměnit tradiční přístup jakým dospívají ve svých myšlenkách k rozhodnutím a dává jim možnost získávat poznatky, jak se průběžně dějí, a mění je v něco, co bych nazval "post-demografickým"světem, v němž můžeme vidět lidské naděje i strachy člověka po člověku v reálném čase, spíše než jen jejich uvedení do pevných demografických označení."

SGI UV: počítač Big Brain

Systém SGI UV 2000 je světově největším data-miningovým nástrojem, na kterém může běžet až 4096 jader a může škálovat do rozsahu až 64TB cache-koherentní sdílené paměti při špičkovém zatížení I/O kanálů rychlostí čtyř terabajtů za sekundu (14 PB/hod). Systém by mohl zpracovat celý tištěný obsah americké knihovny kongresu za méně než tři vteřiny. S architekturou SGI UV2 můžete začít v malém měřítku se 16 jádry a 32GB paměti a postupně, hladce rozšiřovat. Systém SGI UV je využíván pro vysoce výkonné datové analýzy v oblastech výzkumu jako je kosmologie a genomika až po komerční aplikace pro odhalování podvodů.

"Jsme hrdí na to, že přinášíme vědcům, datovým analytikům a inženýrům nástroje a technologie, které jim umožní najít odpovědi na jejich nejnáročnější problémy," uvedl Jorge Titinger, prezident a CEO společnosti SGI. "Porozumění oblasti Big Data vyžaduje více než kolik mohou nabídnout tradiční přístupy analýzy dat a přesouvá se do sféry vysoce výkonných analytických údajů, kde můžete v reálném čase proměnit údaje na skutečné dolary a centy pro každou organizaci."

Přečtěte si více o SGI UV a o řešeních SGI Big Data na sgi.com.


Komentáře

RSS 

Komentujeme

Kradená auta: Další úkol pro bezpečnostní kamery

Pavel Houser , 16. srpen 2017 06:30
Pavel Houser

Bezpečnostní kamery, které hledají ukradená vozidla nebo mají za úkol vozidlo jednoznačně identifiko...

Více






Kalendář

24. 08. Webinář Synology - DSM 6.1 - Virtual Machine Manager
27. 08.

31. 08.
VMworld 2017
01. 09.

06. 09.
IFA 2017
RSS 

Zprávičky

Euronics a Kasa chystají nový sklad v Jirnech u Prahy

Pavel Houser , 16. srpen 2017 11:00

Skladníci již nebudou chodit pro zboží, ale zboží „přijede“ za nimi. Chytré technologie umožní vyexp...

Více 0 komentářů

Oracle Exadata Cloud i na cloudové infrastruktuře nové generace

Pavel Houser , 16. srpen 2017 10:04

Deklarované přednosti: obří výkon, jednoduchá migrace do cloudu a plná kompatibilita s databázemi Or...

Více 0 komentářů

Operátoři si stěžují EK kvůli dotacím na rychlý internet

ČTK , 16. srpen 2017 09:00

O dotaci na budování vysokorychlostních přípojek v zaostalých regionech se po více než třech měsícíc...

Více 0 komentářů

Starší zprávičky

Mall Group přebírá Košík.cz

Pavel Houser , 15. srpen 2017 17:45

Spojení obou firem by mělo vést ke vzniku nové jedničky v segmentu on-line prodeje potravin. ...

Více 0 komentářů

Praha dá 1,4 milionu měsíčně na fungování datové platformy

ČTK , 15. srpen 2017 13:52

V rámci koncepce Smart Prague město zatím spustilo chytré lavičky a solární odpadkové koše....

Více 0 komentářů

Datart se chce spojit s majitelem prodejen Euronics a Kasa.cz

ČTK , 15. srpen 2017 11:02

Úřad pro ochranu hospodářské soutěže (ÚOHS) začal posuzovat jednu z největších transakcí na trhu s e...

Více 0 komentářů

Facebook včera v ČR spustil bazar Marketplace

ČTK , 15. srpen 2017 09:00

Facebook pokračuje ve strategii vyzobávání služeb, které mají obchodní potenciál, a jejich zahrnován...

Více 0 komentářů