Rozdíly
Zde můžete vidět rozdíly mezi vybranou verzí a aktuální verzí dané stránky.
Obě strany předchozí revize Předchozí verze Následující verze | Předchozí verze Následující verze Obě strany příští revize | ||
kj:hadoop-a-hdfs [21.08.2017 18:19] kj |
kj:hadoop-a-hdfs [31.08.2017 16:49] kj |
||
---|---|---|---|
Řádek 13: | Řádek 13: | ||
==== Architektura Hadoopu ==== | ==== Architektura Hadoopu ==== | ||
* HDFS: distribuovaný FS | * HDFS: distribuovaný FS | ||
+ | * velký soubor je rozdělen na 64 MB chunky a třikrát replikován | ||
+ | |||
+ | |||
* YARN: plánovač úloh a alokátor zdrojů | * YARN: plánovač úloh a alokátor zdrojů | ||
* Application – alokuje zdroje | * Application – alokuje zdroje | ||
Řádek 51: | Řádek 54: | ||
* vhodné, pokud se ptám jen na část sloupců | * vhodné, pokud se ptám jen na část sloupců | ||
* nevhodné pro modifikaci (v Hadoopu netřeba), náročné pro zápis | * nevhodné pro modifikaci (v Hadoopu netřeba), náročné pro zápis | ||
+ | * má metadata až na konci - předtím je ještě nezná, dává smysl | ||
* SequenceFile - vhodný formát pro hodně malých souborů | * SequenceFile - vhodný formát pro hodně malých souborů | ||
kj/hadoop-a-hdfs.txt · Poslední úprava: 18.09.2017 16:16 autor: kj