Car-tech

A Facebook készen áll a hideg tárolásra a nagy mennyiségű adat kezelésére

손(SORN) - "PRODUSORN Diary" 001 : Daily life of Girlgroup

손(SORN) - "PRODUSORN Diary" 001 : Daily life of Girlgroup

Tartalomjegyzék:

Anonim

A Facebook újragondolja az adatok tárolását, hogy megbirkózzanak a 7 petabájtnyi új fotókkal, amelyeket a közösségi hálózat minden hónapban feltölt. Ahogy a fotók száma növekszik, Facebooknak szüksége van olcsóbb, kevésbé energiaigényes módokra az összes információ tárolására, a vállalat infrastrukturális mérnöki alelnöke szerint.

A felhasználók naponta körülbelül 300 millió fotót töltenek be, A Facebook Jay Parikh elmondta szerdán az amszterdami Structure Europe konferenciát. "A Halloween az egyik legnagyobb fotófeltöltési napunk az év során, és valahol majdnem 1 és 2 milliárd fotót töltünk fel egy nap alatt."

A fotók, mint például a Halloween, hamarosan elveszítik érdeklődésüket, senki sem nézi őket néhány nap vagy hét múlva, de "A felhasználóinkkal kötött szerződésünk az, hogy nem tudjuk törölni az adatokat, ha nem érjük el, meg kell tartanunk" - mondta. Ez azt eredményezte, hogy a fotókat egyfajta "hideg tárolóba" helyezi - mondta Parikh.

[További olvasmány: A legjobb TV streaming szolgáltatások]

Ehhez a Facebook új adatközpontot tervez különböző tárolási, kiszolgálóhardverek és hálózati eszközök, amelyek kevesebb energiát és költségeket fogyasztanak, mint a meglévő adatközpontok - mindezt a szerverek válaszidejének megváltoztatása nélkül.

De mennyire hatékony a Facebook a hideg tárolására? Ha az adatközpontokban felmerülő költségek és energiafogyasztás csökken, akkor ez általában a hozzáférési sebességek rovására történik.

A szalagokra vonatkozó adatok tárolása például csökkenti az energiafogyasztást, de jelentősen lelassítja az adatokhoz való hozzáférést.

Az Amazon Web Services a következő egy középső út a Glacier felhő tároló szolgáltatásával, amelyet a szalag helyettesít. A szolgáltatás olyan adatokhoz van optimalizálva, amelyek csak ritkán érhetők el, és amelyeknek több órán át történő letöltési ideje elfogadható.

Ez túl lassú a Facebook számára, Parikh szerint. "Nem tudok egy fényképet, amellyel öt vagy tíz évvel ezelőtt eljutok, és hogy egy banner jelenjen meg a felhasználónak, aki azt mondja:" Hé, miért nem próbálkozol újra 24 órán belül? " Még mindig viszonylag valós időben kell maradnia "- mondta.

Alacsonyabb energiaszükséglet

Image: Data Center KnowledgeFacebook adatközpontja Oregonban

A legtöbb ma használt adatközpont optimalizálva van hatalmat a nagy számítási teljesítményt igénylő feladatok kezelésére. A másik oldalon a "hidegtároló" technológia, amelyre a Facebook gondol, a Parikh. "Sok és sok helyre van szükséged, de nem kell annyi energiát" - mondta, hozzátéve, hogy mindent az adatközpontról kell átgondolni, hogy kezelje a problémát a Facebook szintjén.

Magas szinten, A Facebook olyan szoftverekkel foglalkozik, amelyek meg fogják tudni, hogyan és hol tárolják az infrastruktúra tartalmát, amikor életkoruk van, mondta Parikh. "Ez azt jelenti, hogy az adatok másolata az idő múlásával mozog, és hasznosítani fogja azokat a különböző infrastruktúrákat, amelyeket a tartalom korához optimalizálni fogunk." A szoftverréteg egyes találmányai lehetővé teszik a Facebook számára, hogy továbbra is gyorsan reagáljon, de az adatok költséghatékonyabb tárolására.

A hideg tárolás a következő vagy két évben a Facebook infrastruktúrájának része lesz. A Facebook azt tervezi, hogy nyilvánosságra hozza és megoszthatja azokat az alkatrészeket, amelyeket az Open Compute projekten keresztül érintenek, a Facebook által indított kezdeményezés a nyílt forráskódú szoftver együttműködési modell alkalmazására az adatközpontok hardverének világába.