Google File System: differenze tra le versioni

Versione delle 16:18, 31 mag 2008

Versione attuale delle 14:23, 2 lug 2024

(33 versioni intermedie di 22 utenti non mostrate)

Riga 1:

[[categoria:{{File system]]

{{S|informatica}}

|Nome = GFS

[[en:|NomeCompleto = Google File System]]

}}

Il '''Google File System''' (GFS) è un [[file system]] proprietario distribuito e sviluppato da [[Google]] per proprio uso.

== Caratteristiche ==

Il GFS è ottimizzato per l'immagazzinamento dei dati di Google.

È chiamato anche "BigFiles", ed è stato una delle prime tecnologie sviluppate dai fondatori di Google [[Larry Page]] e [[Sergey Brin]], quando ancora studiavano a Stanford.

I dati di Google sono generati dai vari servizi offerti, tra cui la ricerca nel web, e necessitano di essere trattati e conservati con tecnologie non convenzionali, essendo di dimensioni enormi.

EssendoA estremamentecausa importanti,della loro importanza vengono immagazzinati in modo permanente, in file di dimensioni di circa 100GB, che molto raramente vengono eliminati, sovrascritti o "ristretti".

I file vengono solitamente resi disponibili alla sola lettura.

Il file system è anche progettato e ottimizzato per l'avvio nei cluster computer di Google, i [[nodo|nodi]] che consistono di economici ed indispensabili computer, che richiedono precauzioni a causa dell'alto tasso di fallimento dei singoli [[nodo (informatica)|nodi]] e la conseguente perdita di dati.

Altre scelte di progettazione scelgono i [[troughtputs]] per alte quantità di dati, quando ancora la trasmissione dei dati avviene al costo della latenza.

=== Tipi di nodi ===

Esistono due tipi di nodi: i nodi "'''Master"''' e i "Chunkserver"nodi '''Chunk'''.

*I ChunkserverChunk sono macchine [[server]] che conservano i file di dati, conchiamati ogniappunto "chunk". Ogni singolo file spezzato in "chunk"è di dimensione 64 megabyteMegaByte, similmente ai cluster o ai settori dei normali [[file system]].

Ogni chunk è assegnato alla stessa partizione a 64 bit, e la mappatura dei chunk dei vari file è salvata.

Ogni chunk è assegnato alla stessa partizione a [[64 bit]], e la mappatura dei chunk dei vari file è salvata.
Ogni chunk, inoltre, è replicato periodicamente in ogni parte del [[rete di calcolatori|network]], con un'esistenza contemporanea di almeno tre copie dello stesso chunk, ma ancora di più per i file che hanno una grossa domanda o richiesta di maggiore disponibilità.

*I Master sono macchine server Masterche hanno competenze diverse: solitamente non memorizzano i chunk, ma piuttosto tutti i [[metadato|metadati]] associati ai chunk, come le tabelle con la mappatura delle partizioni a 64 bit per registrare la posizione dei file e i file che vengono sostituiti, le posizioni delle copie dei chunk, e quali processi stanno leggendo e/o scrivendo particolari chunk.

Inoltre, prendono uno snapshot del chunk adatto alla replicazione, quando si rileva che il numero di copie di un chunk è minore del minimo prestabilito.

=== Metadati ===

I [[metadati]] vengono conservati nello stato corrente dai server Master che periodicamente riceve aggiornamenti da ogni server chunkChunk (detti "Heart-Beat Messages").

I permessi per le modifiche dei file sono controllati da un sistema e concessi per un tempo limitato, in cui nessun altro processo può accedere al chunk.

Il Chunkserver proprietario del chunk modificato, invia i cambiamenti ai chunkserver aventi le copie di [[backup]].

I cambiamenti non sono salvati finché tutti i Chunkserver non garantiscano il compimento dell'operazione.

I programmi acedonoaccedono al chunk dopo aver ottenuto dal server Master la posizione del chunk desiderato; se il chunk non è utilizzato, il Master replica con le posizioni, e il programma replica con le posizioni, e il programma riceve i dati direttamente dal chunkserver (similmente a [[Kazaa]] e i suoi supernodi).

== Implementazioni ==

Diversamente da molti [[File System]], il GFS non è implementato in nessunnel [[kernel]] del [[sistema operativo]], ma utilizzabile accedendoè adisponibile libreriecome specifichelibreria.

==Voci correlate==

Diversamente da molti [[File System]], il GFS non è implementato in nessun [[kernel]], ma utilizzabile accedendo a librerie specifiche.

*[[MapReduce]]

*[[File system distribuito]]

*[[BigTable]]

*[[SSTable]]

== VociAltri correlateprogetti ==

{{interprogetto}}

== Collegamenti esterni ==

*[[BigTable]], Base di dati implementata in GFS

* {{Collegamenti esterni}}

* {{en}}[http://storagemojo.com/?page_id=152 Google File System Eval: Part I] su [http://storagemojo.com/ StorageMojo]

{{Portale|Google}}

[[categoria:File system]]

[[categoria:Google]]

[[csCategoria:Google File Systemsystem]]

[[deCategoria:Google File System]]

[[en:Google File System]]

[[fr:Google File System]]

[[ru:Google File System]]

[[zh:Google檔案系統]]