neprihlásený Pondelok, 16. decembra 2019, dnes má meniny Albína   DonaskaKvetov.sk - donáška kvetov v SR a zahraničí Pošli kvety
Twitter používa BitTorrent na distribúciu súborov medzi servermi

DSL.sk, 29.7.2010


Spoločnosť Twitter, prevádzkovateľ rovnomennej najpopulárnejšej mikroblogovacej služby, používa na aktualizáciu svojho softvéru na svojich serveroch špeciálne nakonfigurovaný BitTorrent.

Informoval o tom Larry Gadea z Twitteru.

Podľa Gadea časté aktualizácie serverového kódu Twitteru majú minimálne sto megabajtov a potrebné ich je čo najskôr dostať na tisícky serverov. Twitter v minulosti používal centrálnu distribúciu pomocou softvéru Git na správu verzií súborov, aktualizácia trvala až približne 40 minút.

V súčasnosti už používa vlastný softvér označený Murder, ktorý pre vlastný prenos využíva protokol BitTorrent a aktualizáciu všetkých serverov zvládne za 12 sekúnd.

BitTorrent je používaný kontrolovane tak, aby sa všetky servery zoradili do jedného radu a každý v štandardnom režime sťahoval iba od jedného ďalšieho serveru a poskytoval dáta práve jednému ďalšiemu. Keďže BitTorrent súbor delí a prenáša po malých blokoch, neprichádza k veľkému spomaleniu oproti optimálnemu prenosu BitTorrentom a zároveň je distribúcia výrazne deterministickejšia.

Murder využíva knižnicu BitTornado napísanú v Pythone, sťahovanie riadi pomocou trackera poskytujúceho serverom najskôr iba po jednom peere.

Pre neovplyvňovanie poskytovania webových stránok z týchto serverov počas aktualizácie je rýchlosť prenosu medzi dvomi servermi zvyčajne limitovaná na 10 MB/s.

Softvér Murder je open source a sťahovať je ho možné z github.com.


      Zdieľaj na Twitteri



Najnovšie články:

Raspberry Pi sa predalo 30 miliónov
Samsung nepredal milión skladateľných smartfónov, prezident si mal popliesť čísla
V 187 bankomatoch si je možné vyberať hotovosť smartfónom
Dnes bola sprístupnená nová séria The Expanse
Rusko spravilo raziu v Nginxe, ruský vyhľadávač tvrdí že mu server patrí
Samsung tvrdí, že predal milión skladateľných Galaxy Fold
Nové .sk domény budú naďalej lacnejšie, DNSSEC má už štvrtina
Štát pri dotáciách na elektromobily priznal technický problém, stredu anuluje a dotácie navýši
Chaos s dotáciami na elektromobily pokračuje, opäť až v pondelok - aktualizácia 1
Intel zrejme plánuje mať o 10 rokov 1.4-nm čipy


Diskusia:
                               
 

no co uz
Odpovedať Známka: -7.1 Hodnotiť:
 

Nieco podobne robi aj Facebook vid http://tiny.cc/s47uj
Odpovedať Známka: 10.0 Hodnotiť:
 

no hej, facebook tiez :D http://bit.ly/bsQrr1
Odpovedať Známka: 10.0 Hodnotiť:
 

deterministickejšia
Odpovedať Známka: 10.0 Hodnotiť:
 

ako mozu stihnut vsetky servery za 12s, ked sa kopiruje sekvencne a rychlost je limitovana, takze len na prvy sa 100MB skopiruje za prvych 10sekund.
Odpovedať Známka: 7.1 Hodnotiť:
 

BitTorrent prenáša dáta po blokoch, tzv. chunkoch, zvolenej veľkosti, napríklad 256 KB. Akonáhle je na prvom serveri prvý blok, už sa môže prenášať na ďalší, atď. Tie dáta aj pri obmedzení tak v podstate plynulo po blokoch tečú cez všetky servery rýchlosťou limitu napr. 10 MB/s s postupným malým oneskorením spôsobeným spracovaním na každom serveri, pri obmedzovaní zvyčajnými spôsobmi nesúvisiacim s rýchlostným limitom.
Odpovedať Známka: 9.0 Hodnotiť:
 

skus liat vodu dolu po schodoch a zistis ze sa najprv nezleje vsetka na prvi schod a potom na dalsi a dalsi atd.. ale tecie v jednom prude az ku poslednemu a pritom kazdi jeden zostane rovnako mokri v kratkom case :D to iste plati aj pre tie servre data knim tecu v jednom prude az kym nepridu k poslednemu.
Odpovedať Známka: 9.1 Hodnotiť:
 

idem to hned vyskusat
Odpovedať Známka: 10.0 Hodnotiť:
 

na piatom schode mi to hlasi "tracker is not responding"
Odpovedať Známka: 10.0 Hodnotiť:
 

RIAA by si mala nich torentakov posvietit! a SOZA tiez.
Odpovedať Známka: 1.7 Hodnotiť:
 

Na Teba by si mal posvietiť psychiater.
Odpovedať Známka: 6.7 Hodnotiť:

Pridať komentár