Archív Internetu dosiahol 10 petabajtov

DSL.sk, 28.10.2012

Internet Archive, archív Internetu prevádzkovaný rovnomennou neziskovou organizáciou na adrese archive.org, dosiahol hranicu 10 petabajtov, teda 10 tisíc terabajtov respektíve 10 miliónov gigabajtov, zarchivovaných dát.

Organizácia to oznámila v piatok.

Internet Archive odštartoval na prelome tisícročí s cieľom archivovať internetové stránky, postupne ale začal archivovať aj knihy a rozličné audio a video súbory a naposledy pridal napríklad kompletné vysielanie spravodajstva dvadsiatich amerických televíznych kanálov od roku 2009.

Jeho hlavná časť pomenovaná Wayback Machine si umožňuje pozrieť podobu webových stránok v rozličných časoch v minulosti, pričom napríklad pre staršie webové stránky zo Slovenska má v archíve rádovo stovky až niečo viac ako tísíc rozličných verzií. Posledné sprístupnené verzie sú z roku 2011.

Podľa štatistiky z decembra 2010 najviac miesta na úložných systémoch organizácie obsadzoval práve archív bežných webových stránok, ktorý tvoril 2.4 PB. Na knihy, hudbu a video pripadlo 1.7 PB a celková kapacita úložného systému dosahovala 5.8 PB. Aké sú aktuálne podiely jednotlivých typov archivovaných dát nie je jasné.

Internet Archive používa pre ukladanie dát v súčasnosti úložné servery vlastného návrhu, označované Petaboxy. Podľa septembrového oznámenia používa 3 TB disky, pričom v jednom 4U serveri ich má byť použitých 38, z toho dva sú použité na operačný systém a ďalších 36 na dáta. V jednom racku je desať 4U serverov.

Petaboxy Internet Archive (vľavo) a dva racky úložného systému superpočítača Aurel, kliknite pre zväčšenie (foto: Internet Archive a Datalan)

Takýto počet diskov a serverov by znamenal na jeden rack celkovo 1140 TB diskovej kapacity respektíve 1080 TB na dáta, samozrejme pred použitím RAID mechanizmov pre ochranu dát.

Na snímke Petabox serverov je síce vidieť len 24 na prednej strane prístupných 3.5" diskových pozícií, podľa dostupných informácií Internet Archive ale využíva skrinky od Super Micro s dostupnými diskovými pozíciami aj zo zadnej strany.

Screenshot z manažovacieho softvéru úložného systému superpočítača Aurel, kliknite pre zväčšenie

Pre porovnanie diskový úložný systém IBM DS5300, za ktorý SAV zaplatila 558.5 tisíc eur bez DPH, má v jednej 3U polici šesťnásť 2 TB SATA diskov, v jednom racku desať políc a spolu teda 160 diskov s kapacitu 320 TB na jeden rack. Úložný systém používa dva nie úplne obsadené racky podľa údajov v manažovacom softvéri aj podľa informácií dodávateľa riešenia s celkovo 300 diskami a teda celkovou kapacitou 600 TB.


Najnovšie články:



Diskusia:

Archív Od reg.: Milosx | Pridané: 28.10.2012 15:16 Tak toto počujem prvý raz že nejaký archív internetu :D To som nečakal, myslel som že najviac ma archivované Google :D Odpovedať Známka: -5.1 Hodnotiť:

Re: Archív Od reg.: Psychiater | Pridané: 30.10.2012 8:38 To ako vážne počuješ o Archive.org prvý krát v živote? Ty si sa vrátil z basy alebo z Marsu? Odpovedať Známka: -3.3 Hodnotiť:

Posli kvety Od: Raman | Pridané: 28.10.2012 15:16 Bez porna 10 BR diskov. Odpovedať Známka: 6.7 Hodnotiť:

skara Od: bunko | Pridané: 28.10.2012 15:18 Sakra tolko porna a pokope to je raj dufam ze aspon fullhd :) Odpovedať Známka: -0.8 Hodnotiť:

dsl.sk Od reg.: čitateľ | Pridané: 28.10.2012 15:24 dsl.sk zacinalo v 2004, pekne : ) http://sdu.sk/eZytDzEfb Odpovedať Známka: 8.0 Hodnotiť:

Re: dsl.sk Od reg.: Uhlik | Pridané: 28.10.2012 15:40 a svoj aktuálny dizajn má od februára 2005 - http://dopice.sk/40U :o) ... Odpovedať Známka: 8.2 Hodnotiť:

Re: dsl.sk Od: Mark01 | Pridané: 28.10.2012 16:34 Ale je jednoduchy a prehladny - tak naco menit... Odpovedať Známka: 7.2 Hodnotiť:

Re: dsl.sk Od: mika_ | Pridané: 28.10.2012 16:38 s tym suhlasim akurat by som vyhodil zbytocnosti :) rozumej update.dsk aj tu modru sekciu z cenami dsl... aj hot story beta a tu blbu reklamu co skracuje nazvy spraviciek :) hned by to bola krasna stranka :) Odpovedať Známka: 8.2 Hodnotiť:

Re: dsl.sk Od: mika_ | Pridané: 28.10.2012 16:40 s cenami ... :) madarska klavesnica :) Odpovedať Známka: 2.0 Hodnotiť:

Re: dsl.sk Od: baca z velku Cibulu | Pridané: 28.10.2012 18:26 Na tie ceny sa coskoro pozrie SOI Odpovedať Známka: 7.3 Hodnotiť:

Re: dsl.sk Od: -...- | Pridané: 28.10.2012 20:38 Nahodou dsl je jedna z mala stranok ktora ma reklamy v rozumnej miere. A update.dsl je ta naj vec pod slnkom :D Odpovedať Známka: 7.6 Hodnotiť:

Re: dsl.sk Od: mika_ | Pridané: 28.10.2012 21:00 to ano ale neviem naco tam je ten stvorcek vlavo od A K T U Á L N E I T S P R Á V Y a este aj ked je otvorena novinka :) uplne staci ten stlpik co sa nachadza mimo text v pravo :) Odpovedať Známka: -5.0 Hodnotiť:

Re: dsl.sk Od: acmm | Pridané: 28.10.2012 22:16 no tak pozor, update dsl sk, DSL pripojenie a Merace treba rozhodne ponechat, je to tam ako krasny retro doplnok, ako aj samotny dizajn, prave kvoli tymto veciam sem chodim...ked toto zmizne, tak DSL.sk uz nikdy nebude tym pravym DSL.sk. V dobrom, samozrejme :) Odpovedať Známka: 8.5 Hodnotiť:

Re: dsl.sk Od: ... | Pridané: 29.10.2012 1:30 ak to zmizne tak to uz v dobrom nebude D: Odpovedať Známka: 0.0 Hodnotiť:

Re: dsl.sk Od reg.: SedyMrak | Pridané: 29.10.2012 18:32 Akurát som sa chcel spýtať že od ktorého dátumu sa aj update.dsl nezmenilo :-D Odpovedať Hodnotiť:

Re: dsl.sk Od: Tomaxxko | Pridané: 29.10.2012 1:04 Presne na tomto tvojom linku je zaujímavé si prečítať článok o Google, aký nevinný vyhľadávač a nič viac :D Plus tá diskusia k článku :D no konec Odpovedať Známka: 5.0 Hodnotiť:

prihlásený užívateľ. Od: prihlásený užívateľ. | Pridané: 28.10.2012 16:35 A práve od februára 2005 som každodenným navštevníkom serveru DSL.sk Odpovedať Známka: 6.0 Hodnotiť:

Re: prihlásený užívateľ. Od: tretinos | Pridané: 28.10.2012 21:46 Mne sa na dsl.sk paci, ze diskusia pod clankom je spolu s clankom. Ze, netreba zvlast klikat aby som si precital diskusiu. Odpovedať Známka: 9.0 Hodnotiť:

Re: prihlásený užívateľ. Od: Citatel. | Pridané: 29.10.2012 1:34 Ja citam dsl.sk tiez skoro kazdy den, a to tak, ze precitam titulok, ked zaujme titulok kliknem, scrollnem do diskusie, citam diskusiu, pridam zopar komentov a ked ma diskusia pobavi, precitam si aj clanok, ps: logiku nehladaj ;D Odpovedať Známka: 3.3 Hodnotiť:

dizajn DSL Od: brano2ge | Pridané: 28.10.2012 17:22 tu by sa mohla redakcia trosku zastavit a najst si cas 10 minut, aby vyhodili z lavej navigacie niektore veci. Napriklad velmi zly dojem robi zlty frame: update.dsl.sk v0.92 Skype 3.0.0.198 Opera 9.10 Mozilla Thunderbird 1.5.0.9 tak to su mi naozaj novinky...na takom dolezitom mieste...fakt, je to 10 minut roboty...tak sa uvedomte...samozrejme v dobrom :) Odpovedať Známka: 7.1 Hodnotiť:

Re: dizajn DSL Od: H2O | Pridané: 28.10.2012 17:55 Podla mna ide o takzvany retro dizajn, retro je v mode, retro sa vracia, retro je styl. Odpovedať Známka: 7.1 Hodnotiť:

Re: dizajn DSL Od reg.: Milosx | Pridané: 28.10.2012 19:37 Retro uznávam, sám mám takú aj motorku...ale tu je to skor naškodu ten žltý a modrý rámček. Pridáva dojem že sa o stránku nikto nestará a len sem-tam niečo napíše, alebo to vyhodiť odtiaľ nevie...samozrejme v dobrom, kvalitka článkov je super. Odpovedať Známka: 0.0 Hodnotiť:

Re: dizajn DSL Od: barbar onan | Pridané: 28.10.2012 19:29 Design DSL je taký neotrelý, aby sa nám sem nevtierali SMEtiari Odpovedať Známka: 9.3 Hodnotiť:

Re: dizajn DSL Od: -...- | Pridané: 28.10.2012 20:47 Zaujimave http://dopice.sk/416 Odpovedať Známka: -3.3 Hodnotiť:

Re: dizajn DSL Od reg.: yanick | Pridané: 29.10.2012 10:53 Ja by som navrhol urobil krok dopredu a ponukat retro najnovsie verzie, napr.: - Arachne (web browser) - mIRC (Chat) - pine (email) Na to staci naozaj 10 minut, staci to urobit raz, tie cisla verzii uz asi rast nebudu:-) Inak celu stranku DSL.sk by som nechal taku ako je teraz, mne sa paci. To co sa ma menit sa meni (clanky, aktuality a meniny) a ostatne ma netrapi (update.dsl.sk) :-) Odpovedať Známka: 2.0 Hodnotiť:

Re: dizajn DSL Od: Mek | Pridané: 31.10.2012 13:28 Este je tu jedna moznost: ze zabudli heslo na FTP a cez administraciu webu sa to zmenit neda :) Odpovedať Hodnotiť:

vvvvvvvvv Od: rastofresko | Pridané: 28.10.2012 19:19 pekne Odpovedať Známka: 3.3 Hodnotiť:

Koniny Od: Stone | Pridané: 28.10.2012 23:53 Neporusuju touto archivaciou autorske zakony? Doraz im tam vtrhne FBI a vsetko im pomaze. Odpovedať Známka: 7.1 Hodnotiť:

Otázka Od reg.: makatch | Pridané: 29.10.2012 5:44 Je tam aj záloha megauploadu? Odpovedať Známka: 6.0 Hodnotiť:

Ťuknutý Od: Ťukoš | Pridané: 29.10.2012 5:55 Ľudia vážne? Príspevok o 10 petabajtoch a vy tu radšej riešite dsl ako porno? Odpovedať Známka: 7.8 Hodnotiť:

Re: Ťuknutý Od: -...- | Pridané: 29.10.2012 6:30 Casy sa menia Odpovedať Známka: 7.5 Hodnotiť:

Re: Ťuknutý Od: chocholusik2 | Pridané: 29.10.2012 7:58 zajtra... Odpovedať Známka: 6.0 Hodnotiť:

stiahnut vsetko Od: juAhele | Pridané: 29.10.2012 8:53 Kedisi sa mi snivalo ze som stiahol cely internet na HDD. A niekomu sa ten sen splnil. Odpovedať Známka: 6.7 Hodnotiť:

ktovie Od: hrstka hornych | Pridané: 29.10.2012 14:49 ktovie kolko peta ma na svojich pozemkoch sliedič gugl :) Odpovedať Hodnotiť:

Autor by si mal zopáknuť mocninové rady Od: Jenna | Pridané: 30.10.2012 12:53 10 petabajtov, teda 10 tisíc terabajtov respektíve 10 miliónov gigabajtov... :DDD a teraz nejaký s blondínkami Odpovedať Hodnotiť:

Pridať komentár