hadoop

6El calor

1Respuesta

Organización de depósito para el proyecto Hadoop

Estoy comenzando un nuevo proyecto Hadoop que tendrá múltiples trabajos hadoop (y por lo tanto varios archivos jar). Usando mercurial para el control de la fuente, me preguntaba ¿cuál sería la mejor f

6El calor

2Respuesta

Necesito ayuda para implementar este algoritmo con el mapa Hadoop MapReduce

tengo un algoritmo que pasará por un gran conjunto de datos leerá algunos archivos de texto y buscará términos específicos en esas líneas. Lo tengo implementado en Java, pero no quise publicar el códi

6El calor

3Respuesta

0.20.2 API versión hadoop con java 5

He comenzado un proyecto maven tratando de implementar el algoritmo MapReduce en java 1.5.0_14. He elegido la versión 0.20.2 API hadoop. En el pom.xml estoy usando tanto la siguiente dependencia: < de

5El calor

2Respuesta

Extrayendo datos de MySQL en Hadoop

Estoy empezando a aprender Hadoop, y me pregunto lo siguiente: supongamos que tengo un montón de grandes tablas de producción de MySQL que quiero analizar. Parece como si tuviera que volcar todas las

7El calor

1Respuesta

estructura de lista de adyacencia en HBase

Estoy tratando de poner en práctica el siguiente algoritmo de reducción de grafos en El gráfico es un gráfico no dirigido ponderado quiero despojar todos los nodos con sólo dos vecinos y actualizar lo

9El calor

5Respuesta

¿Hay algún sistema de archivos distribuidos que se ejecute en Windows, excepto Hadoop?

Estoy desesperado por encontrar cualquier DFS que sea compatible con Windows. El único DFS de este tipo es Hadoop HDFS pero es muy difícil implementarlo en otro gran número de máquinas con Windows por

5El calor

4Respuesta

trabajo de cálculo distribuido de Java o Python (con un presupuesto estudiantil)?

Tengo un gran conjunto de datos (c 40G) que quiero usar para algunos NLP (en gran medida vergonzosamente paralelos) en un par de computadoras en el laboratorio, a los cuales hago no tengo acceso de ro

46El calor

4Respuesta

¿Dónde hadoop mapreduce framework envía mis sentencias System.out.print()? (stdout)

Quiero depurar una secuencia de comandos de mapreduce, y sin entrar en muchos problemas traté de poner algunas declaraciones de impresión en mi programa. Pero no puedo encontrarlos en ninguno de los r

9El calor

4Respuesta

¿Cuál es la mejor manera de contar visitantes únicos con Hadoop?

Hola a todos, acaba de empezar en hadoop y curiosidad por lo que la mejor manera en mapreduce sería para contar visitantes únicos si sus archivos de registro se veía así ... DATE siteID action userna

10El calor

4Respuesta

Variables globales en hadoop

Mi programa sigue un enfoque iterativo de mapa/reducción. Y debe detenerse si se cumplen ciertas condiciones. De todos modos, puedo establecer una variable global que pueda distribuirse en todas las t