Hadoop En Windows 10 4i5s6a

Instalar Hadoop-2.6.x en Windows 10

Instalar Java 1. En variables de entorno  Variables de  Variable: JAVA_HOME  Value: C:\java

 Variables del sistema:  Variable: PATH  Value: C:\java\bin

Si todo quedo correctamente debe aparecer así

Instalar Eclipse 1. En variables de entorno  Variables de  Variable: ECLIPSE_HOME  Value: C:\eclipse

 Variables del sistema:  Variable: PATH  Value: C:\eclipse \bin

Descargar “hadoop2x-eclipse-plugin-master”, este es un repositorio de github, copiar los 3 archivos con extencion .jar y pegarlos en C:\eclipse\dropins “slf4j-1.7.21”, se encuentra en internet, copiar los archivos .jar y pegarlos dentro de la carpeta C:\eclipse\plugins “Hadoop-2.6.x”, de la pagina oficial de Hadoop http://hadoop.apache.org/releases.html

Carpeta Hadoop Con la carpeta de Hadoop a) Pegarla en el disco D (Diferente al disco donde se encuentra instalado el Windows) b) Descargar “hadoop-common-2.6.0-bin-master”, los 11 archivos que se encuentren en este documento pegarlos en la carpeta bin de Hadoop, del disco D. c) Crear una carpeta llamada “data” en Hadoop y dentro de esta carpeta data crear otras dos carpetas llamadas “data” y “name”. d) Crear una carpeta de almacenamiento temporal y otra para el log en Hadoop, quedaría algo como “D:\hadoop\temp.” “D:\hadoop\log”

Carpeta Hadoop • En la subcarpeta etc de la carpeta Hadoop, editar los siguientes archivos I. core-site.xml II. hdfs-site.xml III. mapred.xml IV. yarn.xml • En la ruta “Hadoop/etc/hadoop” editar “hadoop-env.cmd” escribiendo JAVA_HOME=C:\java

Variables I.

Variables de • Variable: HADOOP_HOME • Valor: D:\hadoop

II. Variables del sistema • Variable: Path • Valor: D:\hadoop-2.6.0\bin D:\hadoop-2.6.0\sbin D:\hadoop2.6.0\share\hadoop\common\* D:\hadoop-2.6.0\share\hadoop\hdfs D:\hadoop2.6.0\share\hadoop\hdfs\lib\* D:\hadoop-2.6.0\share\hadoop\hdfs\* D:\hadoop2.6.0\share\hadoop\yarn\lib\* D:\hadoop-2.6.0\share\hadoop\yarn\* D:\hadoop2.6.0\share\hadoop\mapreduce\lib\* D:\hadoop-2.6.0\share\hadoop\mapreduce\* D:\hadoop-2.6.0\share\hadoop\common\lib\*

Se puede evidenciar

Hadoop • Formatear el nombre del nodo, en la subcarpeta bin de Hadoop escribimos en la terminal “cd hadoop-2.6.0.\bin” y luego“hdfs namenode –format” • Para comenzar Hadoop: Vamos a la dirección “D:\hadoop\sbin.” e iniciamos los siguientes ejecutables “start-dfs.cmd” and “startyarn.cmd”

Se tendrían que haber abierto las siguientes terminales

Se puede acceder a través del dirección http://localhost:8088

En el documento • Se puede encontrar como ejecutar un proyecto • Como crear un proyecto MapReduce en eclipse • Conectar DFS en eclipse