Kuinka suuri pilvi on?

Iso pilvi

Viime kuussa 2007es.com paljasti sinulle Internet-pornon todellinen mittakaava . Aikuisvideoiden suoratoisto käyttää kerralla todennäköisesti noin 30% Internetin koko kaistanleveydestä, mikä vastaa noin 6 teratavua pornoa joka sekunti . Mutta entä muut 70%? Netflix, YouTube ja muut ei-aikuisille tarkoitetut videosivustot ovat valtavia kaistanleveyssikoja, joiden osuus Internet-liikenteestä saattaa olla jopa 40%. Digitaaliset arkistokaapit, kuten Rapidshare ja Megaupload, muodostavat noin 10% maailmanlaajuisesta liikenteestä. Verkkosurffaus ja sähköposti (ja roskaposti!) Ovat vielä 15%. Ja sitten on pilvipalvelu.



Nykyään valtaosa verkkopalveluista ja sivustoista on pilvipalvelussa. Tarkoitan tällä sitä, että yritysten (kuten Ziff Davis / 2007es.com) sijaan, jotka hallitsevat omaa laitteistoa, käytetään kolmannen osapuolen pilvitallennus- ja laskentapalveluja. Amazon Web Services (AWS), Microsoft Azure ja Google ovat kolme näkyvää esimerkkiä valtavista pilviklustereista, mutta on olemassa satoja pienempiä toimintoja, jotka vaihtelevat koko datakeskuksesta muutamaan telineeseen.

Pilvin voima kuuluu siihen, että sitä voidaan pakottaa ja kengännauhata tehtäviin yhtä erilaisina kuin pilvipohjainen supertietokone , verkkopostiin, osoitteeseen yksinkertainen asiakirjojen tallennus . Yhdessä pilvipalveluryhmässä Google voi isännöidä ja palvella petatavuja YouTube-videoita sekä tallentaa kaikki sähköpostisi ja dokumenttisi. Kaikista pilven puolista keskitymme kuitenkin tänään pilvitallennukseen.



Microsoft-palvelinkeskus

Microsoft-palvelinkeskus

Vaikka tallennus ei ehkä ole yhtä seksikäs kuin teratavu RAM-muistia ja tuhansia suorittimen ytimiä, se on luotettavin tapa mitata koko pilvestä, varsinkin kun otetaan huomioon kaistanleveyden käyttö. Tallennuksen kokonaismäärästä voimme myös selvittää kustannus pilvitallennustilaa - ja sieltä voimme lopulta treenata miksi kuten Google, Microsoft ja Dropbox ovat kaatumassa itsensä tarjoamaan pilvivarastopalveluja.



Kuten pornotarina, aloitamme ensin joillakin teoreettisilla numeroilla ja siirrymme sitten reaalimaailman hahmoihin (ja laitteistoihin) Backblaze-palvelusta, joka on pilvipalvelujen tarjoaja.

Petatavua

Suurimmilta osin suurten yritysten, kuten Google, Facebook, Amazon ja Microsoft, todellisia lukuja on vähän. Jos kuitenkin pyyhkäät verkkoa, syntyy karkeita pallopuuhahmoja:

  • Facebook ilmoitti IPO-hakemuksessaan, että se tallentaa yli 100 petatavua (PB) mediaa (valokuvia ja videoita). Ei ole epärealistista sanoa, että Facebookilla on todennäköisesti kapasiteettia kokonaisuudessaan paljon pidemmälle, kun otetaan huomioon varmuuskopiot ja muut tiedot (tilapäivitykset, tykkäykset ja niin edelleen), mahdollisesti 300PB-alueella.
  • Microsoft myönsi äskettäin, että Hotmail tallentaa yli 100 petatavua ja että SkyDrive, jolla on '17 miljoonaa asiakasta', tallentaa 10PB dataa. Kuten Facebook, Microsoftin kokonaiskapasiteetti on todennäköisesti yli 300 petatavua, kun otetaan huomioon muu Azure ja sen verkko-ominaisuudet.
  • Mega-lataus on suhteellisen pieni verrattuna siihen, että siinä on ilmeisesti vain 25 petatavua.
  • Amazon sen sijaan, että antaisi meille mukavan, helpon määrän petatavuja, ilmoittaa sen sijaan S3-pilvivarastopalvelunsa tallentamien objektien kokonaismäärän. Huhtikuusta 2012 lähtien Amazon S3 -laitteeseen oli tallennettu 905 miljardia esinettä. Jos oletamme, että keskimääräinen koko on 100 kt, se on noin 90 petatavua; Jos keskikoko on 1 Mt, se on 900 petatavua - melkein eksatavu!
  • Dropbox, vuosi sitten, tallensi 'yli 10 petatavua' tietoa. Silloin sillä oli 25 miljoonaa käyttäjää ja nykyään 100 miljoonaa käyttäjää, joten kaikki asiat ovat yhtä suuret kuin yhtiöllä on nyt noin 40PB tietoa.

Näiden lukujen näyttämiseksi perspektiivissä keskimääräisellä tietokoneella on todennäköisesti 500 Gt: n tai 1 Tt: n kiintolevy ja petatavulla 1024 Tt. Ainakin sitten Microsoftin ja Facebookin palvelinkeskuksissa on isäntänä yli 100 000 kiintolevyä. Rakentamatta mukautettua laitteistoa, voit puristaa 48 asemaa 4U-koteloon. Verkkovälineiden laskemisen jälkeen se tarkoittaa todennäköisesti noin 400 kiintolevyä 40U-telineessä - tai 250 telineitä, joista kukin vie noin neliömetrin lattiatilaa. Tämä saattaa kuulostaa paljon, mutta kun otetaan huomioon, että Google, Amazon, Facebook ja Microsoft julkaisevat säännöllisesti datakeskuksia, joiden pohjapiirrokset ovat yli 30000 neliömetriä (300 000 + neliömetriä), se ei todellakaan ole niin paljon. Suuressa mittakaavassa paljon enemmän tilaa on varattu palvelimille (ts. Suorittimille) ja verkkolaitteille.

Kaistanleveys



Palvelinkeskuksen kytkinKaistanleveyden mukaan meillä on vielä vähemmän tietoja isoista pojista. Tiedämme, että viime vuodesta lähtien miljoona tiedostoa tallennettiin viiden minuutin välein - joten tänään, neljä kertaa enemmän käyttäjiä, se on 800 000 tiedostoa minuutissa. Amazon S3, joka on huomattavasti suurempi kuin Dropbox, käsittelee '650 000 pyyntöä sekunnissa'.

Jos oletetaan, että keskimääräinen Dropboxiin tallennettu tiedosto on 500 kt (sekoitus valokuvia, videoita ja asiakirjoja), Dropbox tallentaa yhteensä 400 000 megatavua (0,4 Tt) minuutissa tai 6,7 Gt / s (54 Gb / s). Meillä ei ole tietoja siitä, kuinka paljon tietoa Dropbox lähettää minuutissa (ts. ihmiset lataavat tiedostoja Dropboxista), mutta se on todennäköisesti alueella 10-20 Gbps.

Amazon S3: lla, jota käytetään pääasiassa staattisten tiedostojen tallentamiseen verkkosivustoille (kuvat, tyylisivut, videot), on todennäköisesti pienempi keskimääräinen tiedostokoko kuin Dropbox. Jos oletetaan, että keskimääräinen koko on 100 kt tiedostoa kohden, 650 000 pyyntöä sekunnissa tuottaa yhteensä 61 gigatavua sekunnissa siirrettyä dataa eli 488 Gbps. Tämä on hyvin lähellä 800 Gbps: n arvoa, jonka arvioimme suurelle pornosivustolle, mikä vastaa noin 2% koko Internet-liikenteestä - Amazon on melko iso!



Facebook ja Microsoft, joissa kussakin on 100-300PB tallennustilaa, kuuluvat todennäköisesti kaistanleveyden suhteen jonnekin Dropboxin ja Amazonin väliin - ehkä 200Gbps kappale.

Mutta tarpeeksi teoriaa! Keskustellaan reaalimaailman numeroista ja todellisesta laitteistosta!

Copyright © Kaikki Oikeudet Pidätetään | 2007es.com