Získávání znalostí
/ Knowledge Discovery >> Získávání znalostí >> technologie >> počítač >> Internet >> základy internetu >>

Jak Google File System Works

užívá systém zvaný kontrolních součtů.. Systém přestávky každý 64 MB bloku do bloků po 64 kilobajtů (KB). Každý blok v rámci kus má svůj vlastní 32-bit kontrolní součet, který je něco jako otisk prstu. Hlavní server sleduje kusy při pohledu na kontrolní součty. V případě, že kontrolní součet repliky neodpovídá kontrolního součtu v paměti master serveru, hlavní server odstraní repliku a vytvoří nový, kdo ho nahradí.

Jaký druh hardwaru Google používá ve svém GFS? Zjistěte si v následující části.
File System Google Hardware

Google říká něco o hardwaru, že v současné době používá pro spuštění dalších GFS, než že je to sbírka off-the-police, levné serverech Linux. Ale v oficiální zprávě GFS, Google odhalil specifikace zařízení, to slouží ke spuštění některých srovnávacích testů na výkon GFS. Zatímco zkušební zařízení nemusí být pravda reprezentace aktuálního GFS hardwaru, to vám dává představu o druhu počítačů Google používá zvládnout obrovské množství dat a ukládá manipuluje.

zkušební zařízení zahrnuta jednu hlavní server, dva master repliky, 16 klientů a 16 chunkservers. Všechny z nich používá stejný hardware se stejnými parametry, a všichni běželi v operačních systémech Linux. Každý měl dvouportové 1,4 gigahertzů procesory Pentium III, 2 GB paměti a dva 80 GB pevné disky. Ve srovnání, někteří prodejci v současné době nabízejí spotřebitelské osobní počítače, které jsou více než dvakrát jak silný jako servery Google, které používá při testech. Vývojáři Google prokázalo, že GFS mohl pracovat efektivně pomocí skromné ​​vybavení.

Síť připojení strojů spolu se skládal z 100 megabajtů za sekundu (Mbps) připojení full-duplex Ethernet a dvěma Hewlett Packard 2524 síťových přepínačů. Vývojáři GFS připojen do klientských počítačů 16 až jedním vypínačem a dalších 19 strojů na další přepínače. Jsou spojeny se dvěma přepínači spolu s jedním gigabyte za sekundu (Gbps) připojení.

Podle zaostává za náběžnou hranu technologie hardwaru, Google může koupit zařízení a komponenty za výhodné ceny. Struktura GFS je taková, že je to snadno přidat více strojů kdykoliv. Pokud clusteru začne blížit plné kapacity, Google můžete přidat další levné hardware do systému a vyvážit pracovní zátěž. Pokud se do paměti hlavního serveru je přetíženi, Google můžete aktualizovat hlavní server s větší pamětí. Tento systém je opravdu škálovatelné.

Jak se Google rozhodne použít tento systém? Některé kreditní najímání politika společnosti Googl

Page [1] [2] [3] [4] [5] [6] [7]