Die afvoer van die Mapper (tussentydse data) word op die Plaaslike lêerstelsel (nie HDFS) van elke individuele karteerderdatanodes gestoor. Dit is tipies 'n tydelike gids wat in konfigurasie deur die Hadoop-administrateur opgestel kan word.
Waar kom MapReduce tussen-data?
- Die karteerder-uitset (tussentydse data) word op die plaaslike lêerstelsel (NIE HDFS NIE) van elke individuele karteerdernodusse gestoor nie. …
- ek dink dit is die parameter wat gewysig moet word om die intermediêre dataligging te verander..
- mapreduce.cluster.local.dir.
- Hoop dit help.
Waar word die karteerder se uitvoer gestoor?
9) Waar word Mapper-uitset gestoor? Die intermediêre sleutelwaardedata van die karteerderuitset sal op plaaslike lêerstelsel van die karteerdernodes gestoor word. Hierdie gidsligging is in die konfigurasielêer gestel deur die Hadoop Admin.
Wat is intermediêre data in MapReduce?
Intermediêre datalêers word gegenereer deur kaart en verminder take in 'n gids (ligging) op die plaaslike skyf. … Uitvoerlêers gegenereer deur die kaarttake wat as insette dien vir die vermindertake. Tydelike lêers gegenereer deur die verminder take.
Waar is die afvoer van karteerder in Hadoop geskryf?
In Hadoop word die afvoer van Mapper op plaaslike skyf gestoor, aangesien dit intermediêre uitvoer is. Dit is nie nodig om intermediêre data te stoor nieop HDFS omdat: dataskryf duur is en replikasie behels wat kostekop en tyd verder verhoog.
