Heim > häufiges Problem > Was sind die drei Hauptkomponenten von Hadoop?

Was sind die drei Hauptkomponenten von Hadoop?

coldplay.xixi
Freigeben: 2023-01-13 00:34:37
Original
42967 Leute haben es durchsucht

Hadoop besteht aus drei Hauptkomponenten: 1. HDFS, ein äußerst zuverlässiges verteiltes Dateisystem mit hohem Durchsatz; 2. MapReduce, ein verteiltes Offline-Parallel-Computing-Framework; 3. Yarn, ein verteiltes Ressourcenverwaltungs-Framework.

Was sind die drei Hauptkomponenten von Hadoop?

Die Betriebsumgebung dieses Artikels: Windows 7-System, Dell G3-Computer.

Drei Hauptkomponenten von Hadoop:

1, HDFS

Ein hochzuverlässiges verteiltes Dateisystem mit hohem Durchsatz

Speicherung massiver Daten

Verteilte

Sicherheit

Kopieren. Daten

Daten Es wird gespeichert in Form von Blöcken, 128M

zum Beispiel: 200M – 128M 72M

2. MapReduce

Ein verteiltes Offline-Parallel-Computing-Framework

Verarbeitung großer Datenmengen

Verteilt

Ideologie:

Teile und herrsche

Großer Datensatz ist in kleine Datensätze unterteilt

Jeder Datensatz führt eine logische Geschäftsverarbeitung durch (Karte)

Statistische Datenergebnisse zusammenführen (reduzieren)

3. Garn

Verteiltes Ressourcenmanagement-Framework

Verwalten der Ressourcen gesamter Cluster (Speicher, CPU-Kerne)

Zuweisen und Planen der Ressourcen des Clusters

Verwandte Videoempfehlungen:

PHP-Programmierung vom Einstieg bis zur Kompetenz

Das obige ist der detaillierte Inhalt vonWas sind die drei Hauptkomponenten von Hadoop?. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!

Verwandte Etiketten:
Quelle:php.cn
Erklärung dieser Website
Der Inhalt dieses Artikels wird freiwillig von Internetnutzern beigesteuert und das Urheberrecht liegt beim ursprünglichen Autor. Diese Website übernimmt keine entsprechende rechtliche Verantwortung. Wenn Sie Inhalte finden, bei denen der Verdacht eines Plagiats oder einer Rechtsverletzung besteht, wenden Sie sich bitte an admin@php.cn
Beliebte Tutorials
Mehr>
Neueste Downloads
Mehr>
Web-Effekte
Quellcode der Website
Website-Materialien
Frontend-Vorlage