MapD
VIDEO: GPU-i pretvaraju vaš PC u superračunalo
Novi softver omogućuje korištenje grafičkih procesora za vizualizaciju Big Data podataka.
Grafički čipovi na grafičkim karticama koje posjedujete u svojim standardnim PC računalima, do sada su se ozbiljnije bavili samo procesiranjem grafike u vašim omiljenim igrama, no zahvaljujući Toddu Mostaku i Samuelu Maddenu, računalnim znanstvenicima s MIT-a, sada se mogu koristiti za vizualizaciju setova "velikih podataka" (Big Data).
Drugim riječima, znanstvenici MIT-a su uspjeli softverski natjerati GPU-e da pomoću njihovog sustava pod nazivom MapD (massively parallel database), znatno ubrzaju "drobljenje" velikih podataka pohranjivanjem podataka na njihovu (ugrađenu) memoriju, umjesto na CPU procesore,
Korištenjem jednog GPU-a visokih performansi (to su oni koje recimo gameri posjeduju u svojim grafičkim karticama), procesiranje podataka se može ubrzati za 70 puta.
Znanstvenici su ovo demonstrirali na primjeru vizualizacije lokacijskih podataka s Twittera (pogledajte video dolje). Većini Twitter vizualizacija na velikoj skali, uključujući mape i grafove, potrebno je nekoliko sekundi ili duže za procesiranje podataka prije nego što budu prikazani. S MapD softverom možete prilagoditi pojmove u pretragama i druge parametre poput zadanog vremenskog okvira ili geografske regije, nakon čega možete trenutno dobiti vizualizaciju bez čekanja da se svaka nova mapa ili animacija procesiraju i učitavaju.
Jedan od prvih korisnika ove tehnologije će biti Sunlight Foundation, organizacija koja promovira transparentnost financiranja izbornih kampanja u SAD-u. Organizacija je u MapD ugradila podatke 22 godine federalnih i državnih izbornih kampanja, kako bi dobila vizualizacije vezane uz 20 milijuna donacija, prema donatorima, regiji, izabranim dužnosnicima i drugim parametrima. Svaki novi zahtjev za vizualizacijom će biti obrađen u roku od samo nekoliko milisekundi.
Jedan od najvećih proizvođača grafičkih čipova i kartica Nvidia, također ima namjeru demonstrirati MapD na više od milijardu tweetova korištenjem 8 GPU-a na jednoj svojoj predstojećoj konferenciji.
Osim korištenja grafičkih čipova za obradu velikih podataka, Madden i Mostak surađuju sa znanstvenicima iz Intela kako bi MapD mogli iskoristiti na njihovim "masovnim paralalenim procesorima", kao i na običnim X86 procesorima koji pokreću većinu računala.
Čitav znanstveni rad možete pogledati u ovom PDF dokumentu, a na ovoj poveznici možete i sami isprobati MapD vizualizaciju podataka s Twittera.
Rekli bismo kako je ovime proizvođačima high-end grafičkih kartica AMD-u i Nvidiji pala sjekira u med, jer sada mogu promovirati svoje GPU-e za funkcije koje im prije nisu padale na pamet.
Izvor: MIT
Učitavam komentare ...