Google vytvoril svetový rekord v triedení 1 TB dát

DSL.sk, 25.11.2008

Spoločnosť Google oznámila dosiahnutie nového najlepšieho času pri triedení jedného terabajtu dát.

Utriedenie desať miliárd záznamov o veľkosti sto bajtov trvalo algoritmu spoločnosti na tisíc počítačoch celkom 68 sekúnd. Doterajší najlepší výkon držalo Yahoo s 209 sekundami na 910 počítačoch, dosiahnutý bol v máji.

Test bol uskutočnený plne v súlade s pravidlami rešpektovaného trediaceho benchmarku pre veľké objemy dát.

Spoločnosť Google použila svoj univerzálny mechanizmus MapReduce a Google File System.

Spoločnosť zároveň testovala triedenie jedného petabajtu dát, v ktorom sa zatiaľ nesúťaží. 10 ^ 13 záznamov o veľkosti sto bajtov spoločnosť utriedila na štyritisíc počítačoch za šesť hodín a dve minúty.

Dáta boli uložené spolu na 48 tisích rozličných pevných diskoch, každý blok dát bol distribuovaným Google File Systemom uložený na troch rozličných diskoch.

Detaily konfigurácie použitých počítačov ani použitého algoritmu spoločnosť nezverejnila, pri rekordnom pokuse Yahoo bolo použitých 910 počítačov so štyrmi dvojjadrovými 2.0 GHz procesormi Xeon.


Najnovšie články:



Diskusia:

titulok k nicemu Od: ludoop | Pridané: 25.11.2008 13:34 chcel by som pracovat pre google aj ked len ako upratovacka v ramci utierania prachy na serveroch a dotknut sa takeho namakaneho servera Odpovedať Známka: 4.3 Hodnotiť:

Re: titulok k nicemu Od reg.: Čestmír =) | Pridané: 25.11.2008 13:38 Google nema namakane servre. On pouziva bezne desktopy, lebo su lacne. Odpovedať Známka: 9.3 Hodnotiť:

Re: titulok k nicemu Od: Milos S | Pridané: 25.11.2008 13:39 jj, ich najvacsia sila je v tom,ze je vsetko krasne distribuovane a je ich hafo vela.Ked im padne 100 servrov, tak sa nic nedeje. No ked padne 100 velmi dobrych servrov, tak je to pruser :) Odpovedať Známka: 9.1 Hodnotiť:

Re: titulok k nicemu Od: PPPPPPPPPPPPP | Pridané: 25.11.2008 19:49 A navyše používajú lacné komponenty a s chybami rátajú. A všetko majú na suché zipsy, kvôli rýchlej výmene. Odpovedať Známka: 8.5 Hodnotiť:

Re: titulok k nicemu Od reg.: Composite | Pridané: 26.11.2008 18:31 nevlastnia to japonci? Lebo to je ich typický štýl výroby ;) Rýchlo, lacno, presne a spoľahlivo. Problém je len ten, že často je viac nepodarkov :D, ale do sveta pustia iba premakané kvalitné kusy. Odpovedať Hodnotiť:

Romeo Od: Sypedadeorp | Pridané: 1.12.2008 11:47 I am so happy that this works! <div style="display:none;"> http://www.financere.biz <a href=http://www.financere.biz>firma</a> </div> Raissa Odpovedať Hodnotiť:

Re: titulok k nicemu Od: Milos S | Pridané: 25.11.2008 13:38 Lol, takto nad navstevou psychiatrie si neuvazoval ? :) Odpovedať Známka: -2.6 Hodnotiť:

Re: titulok k nicemu Od: 3ton | Pridané: 26.11.2008 7:51 - tiez pozeram, ze aka uchylka ... Odpovedať Známka: -3.3 Hodnotiť:

Re: titulok k nicemu Od: lmaoaml | Pridané: 25.11.2008 14:28 aspon niekto tu ma nejake ambicie Odpovedať Známka: 9.1 Hodnotiť:

Re: titulok k nicemu Od: M3G | Pridané: 26.11.2008 1:10 Kámo, ty to raz ďaleko dotiahneš. Ale to by si sa musel dožiť aspoň 200 rokov. Odpovedať Známka: -5.0 Hodnotiť:

Laura Od: Sypedadeorp | Pridané: 1.12.2008 10:13 Good moning <div style="display:none;"> http://www.financere.biz <a href=http://www.financere.biz>firma</a> </div> Herman Odpovedať Hodnotiť:

ziadne desktopy Od reg.: Ironman | Pridané: 25.11.2008 13:45 Oni nemaju desktopy. Maju normalne pocitace v rackoch, akurat si ich stavaju sami. Odpovedať Známka: -5.3 Hodnotiť:

Re: ziadne desktopy Od: Milo S | Pridané: 25.11.2008 13:47 Maju desktopy. Odpovedať Známka: 5.8 Hodnotiť:

Re: ziadne desktopy Od reg.: solomon | Pridané: 25.11.2008 13:53 bezne desktopy, myslene ako bezne suciastky, nie drahy serverovy HW. pouzivaju obycajny desktopovy HW, jedina vynimka su zdroje, tie si stavaju sami. a o rackoch sa neda hovorit ked su to skor police ako server racky. Odpovedať Známka: 8.0 Hodnotiť:

Re: ziadne desktopy Od reg.: Don Mums | Pridané: 25.11.2008 16:18 To sa mi pacilo: "o rackoch sa neda hovorit ked su to skor police ako server racky." Proste sranda. Ale neviem s predstavit taky server rack tie police su viac predstavitelne. :) Odpovedať Hodnotiť:

wwwww Od: lmaoaml | Pridané: 25.11.2008 14:25 Na lokalnom DC hube je bezne az 200 TB. Ale skoda ze vsetci maju len 100Mbps pripojky. Odpovedať Známka: -6.0 Hodnotiť:

Re: wwwww Od: aaaccc | Pridané: 25.11.2008 14:30 to ma nieco spolocne s temou? Odpovedať Známka: 7.6 Hodnotiť:

Re: wwwww Od: den | Pridané: 25.11.2008 14:33 slovo TB Odpovedať Známka: 9.0 Hodnotiť:

Re: wwwww Od: Milos S | Pridané: 25.11.2008 14:44 Ty si dilino, myslis,ze ma nieco spolocne s Temou ked napriklad poviem ze mam 1 TB disk ? Odpovedať Známka: -9.5 Hodnotiť:

Re: wwwww Od reg.: John McClane | Pridané: 25.11.2008 14:50 Ja mam bezný účet v TB :-) Odpovedať Známka: 9.0 Hodnotiť:

Re: wwwww Od: 5ulo | Pridané: 25.11.2008 15:01 :)))))))) tiez som na to iste myslel :D Odpovedať Známka: 5.8 Hodnotiť:

Re: wwwww Od: someone | Pridané: 25.11.2008 17:52 zeby to bolo lepsie ako eura alebo koruny ;-) Odpovedať Hodnotiť:

Re: wwwww Od: gidy | Pridané: 25.11.2008 17:55 :D Odpovedať Hodnotiť:

Re: wwwww Od reg.: michelangelo | Pridané: 25.11.2008 23:10 TB = najlepsi nas uz davno predbehli ;-) Odpovedať Známka: 8.3 Hodnotiť:

Re: wwwww Od: M3G | Pridané: 26.11.2008 1:11 To si myslel na TuberBanku? Odpovedať Hodnotiť:

Re: wwwww Od: lmaoaml | Pridané: 25.11.2008 18:08 viac nez je tvoje oko amatea schopne zaregistrovat Odpovedať Známka: -5.0 Hodnotiť:

: - ) Od reg.: Ironman | Pridané: 25.11.2008 17:02 lol, blazni :) Odpovedať Známka: 6.7 Hodnotiť:

Pridať komentár