hadoop

8El calor

2Respuesta

¿Deberían los clústeres hadoop ejecutarse en un hardware idéntico?

Recuerdo haber leído en alguna parte que el rendimiento de Hadoop se deteriora significativamente si las máquinas en las que se ejecuta son muy diferentes unas de otras, pero parece que ya no puedo en

7El calor

3Respuesta

Iniciar un trabajo de reducción de mapas de eclipse

He escrito un programa mapreduce en Java, que puedo enviar a un clúster remoto que se ejecuta en modo distribuido. Actualmente, enviar la tarea mediante los pasos siguientes: exportación el empleo map

5El calor

3Respuesta

¿Es posible ejecutar hadoop fs -getmerge en S3?

Tengo un trabajo Elastic Map Reduce que está escribiendo algunos archivos en S3 y quiero concatenar todos los archivos para producir un archivo de texto único. Actualmente estoy copiando manualmente l

10El calor

2Respuesta

Consulta dos tablas relacionadas (Uniones)

Esta es la primera tabla en Colmena: contiene información sobre el artículo que estamos comprando. CREATE EXTERNAL TABLE IF NOT EXISTS Table1 (This is the MAIN table through which comparisons need to

5El calor

3Respuesta

División de una tupla en múltiples tuplas en Pig

Me gusta generar múltiples tuplas desde una sola tupla. Lo que quiero decir es: Tengo un archivo con los siguientes datos. >> cat data ID | ColumnName1:Value1 | ColumnName2:Value2 así que cargarlo

7El calor

5Respuesta

hadoop java.io.IOException: mientras se ejecuta namenode -format

Ejecuto namenode -format.This es mi salida. Traté de cambiar los permisos de archivo chmod 777 hadoop. Creo que esta línea es el error ERROR namenode.NameNode: java.io.IOException: No se puede crear e

7El calor

2Respuesta

Herramienta de flujo de trabajo comaparison: Oozie Vs Cascading

Estoy buscando una herramienta de flujo de trabajo para ejecutar trabajos complejos de map-reducir. Tengo a Oozie en mente pero también quiero explorar Cascading. ¿Hay algún ejemplo de código o ejempl

10El calor

7Respuesta

Cómo importar org.apache Java dependencias w/o w/o Maven

Así que el fondo rápida es que estoy creando un programa Java, que utiliza muchas de las importaciones diferentes import org.apache.hadoop.conf.*; import org.apache.hadoop.fs.Path; import or

7El calor

2Respuesta

MapReduce y SQL GROUP POR

He intentado comprender los conceptos básicos de MapReduce en MongoDB e incluso después de implementarlo, no estoy seguro de qué tan diferente es el GROUP BY de SQL o incluso GROUP BY de Mongo. En el

7El calor

1Respuesta

Hadoop slowstart configuration

¿Cuál es el valor ideal para "mapred.reduce.slowstart.completed.maps" para un trabajo de Hadoop? ¿Cuáles son las reglas a seguir para configurarlo adecuadamente? Gracias!