hadoop

18El calor

4Respuesta

Por lo que he entendido, Hadoop es una cosa del sistema de almacenamiento distribuido. Sin embargo, lo que realmente no entiendo es, ¿podemos reemplazar RDBMS normal (MySQL, Postgresql, Oracle) con Ha

5El calor

2Respuesta

Reductor Hadoop no se llama

todos Tengo simple mapa/reducir la implementación. Se llama a Mapper y hace su trabajo pero nunca se llama al reductor. Aquí es mapeador: static public class InteractionMap extends Mapper<LongWritable

5El calor

4Respuesta

¿Cómo puedo depurar el mapa de Hadoop? Reducir

Estoy tratando de construir un mapa de reducir el trabajo. se ejecuta hasta su finalización pero presenta datos extraños al final. cuando intento depurarlo usando system.out.println ("datos de depurac

9El calor

1Respuesta

ejecutar un trabajo Hadoop sin archivo de salida

¿Es posible ejecutar un trabajo hadoop sin especificar archivo de salida? Cuando trato de ejecutar un trabajo hadoop, no es la excepción especificada archivo de salida se lanza. puede cualquiera dar c

5El calor

2Respuesta

Al ejecutar Hadoop en modo pseudo-distribuido, ¿qué directorio debo usar para hadoop.tmp.dir?

De forma predeterminada, Hadoop establece hadoop.tmp.dir en su carpeta/tmp. Este es un problema, porque/tmp se aniquilado por Linux cuando se reinicie, lo que lleva a esta hermosa error de la JobTrack

6El calor

2Respuesta

¿Es posible enviar partes del mapeador al reductor, mientras se escribe la otra parte a HDFS, en hadoop?

Quiero escribir partes de la salida del asignador en una carpeta, digamos la carpeta A en HDFS. La otra parte de la salida, quiero que sea procesada por el reductor. es posible? Estoy al tanto de múlt

6El calor

2Respuesta

¿Cuál es la diferencia entre las tareas de mapa local de Rack y las tareas de mapa de datos locales?

Cuando ejecuto "hadoop job -status xxx", imprima la siguiente lista. Rack-local map tasks=124 Data-local map tasks=6 ¿Cuál es la diferencia entre las tareas de mapa en bastidor local y las tareas d

17El calor

2Respuesta

¿Cómo imprimo las propiedades de hadoop en la línea de comando?

sólo encuentro la manera de establecer una propiedad por hadoop dfsadmin -D xx=yy, pero ¿cómo puedo encontrar el valor de una propiedad específica xx en la línea de comandos?

8El calor

2Respuesta

copiando el directorio del sistema local a hdfs código de Java

Tengo un problema al intentar copiar un directorio de mi sistema local a HDFS usando el código de Java. Puedo mover archivos individuales pero no puedo encontrar una manera de mover todo un directorio

5El calor

3Respuesta

valor de enumeración implementación de la interfaz modificable de Hadoop

Supongamos que tengo una enumeración: public enum SomeEnumType implements Writable { A(0), B(1); private int value; private SomeEnumType(int value) { this.value = value; }