J'ai installé Hadoop 2.7.0 sur Ubuntu 14.04. start-dfs.sh
, start-yarn.sh
y start-all.sh
se trouvent dans le répertoire sbin répertoire. Mais start-mapred.sh
n'est pas présent dans le répertoire. quel peut être le problème dans mon installation ?
Réponse
Trop de publicités?Il ne s'agit pas d'un problème lié à votre installation. Hadoop 2 utilise YARN c'est-à-dire MapReduce 2.0 (MRv2).
Référer Hadoop Yarn pour plus de détails.
Ainsi, start-mapred.sh
n'est pas nécessaire. Pour démarrer Hadoop, utilisez start-all.sh
ou start-dfs.sh
y start-yarn.sh
.
L'objectif initial de YARN était de séparer les deux principales responsabilités du JobTracker/TaskTracker en deux entités distinctes :
- un ResourceManager global
- un maître d'application par application
- un gestionnaire de nœuds esclave par nœud
- un conteneur par application fonctionnant sur un NodeManager
Vous suivez peut-être des tutoriels expliquant la configuration d'Hadoop 1.
Apache Hadoop Yarn vous aidera.