hdfs

9El calor

4Respuesta

Búsqueda de directorios anteriores a N días en HDFS

¿Se puede usar hadoop fs -ls para buscar todos los directorios anteriores a N días (a partir de la fecha actual)? Estoy tratando de escribir una rutina de limpieza para buscar y eliminar todos los dir

12El calor

3Respuesta

Visualización del número de bloques para un archivo en hadoop

¿Cómo puedo ver en cuántos bloques se ha roto un archivo en un sistema de archivos Hadoop?

8El calor

2Respuesta

copiando el directorio del sistema local a hdfs código de Java

Tengo un problema al intentar copiar un directorio de mi sistema local a HDFS usando el código de Java. Puedo mover archivos individuales pero no puedo encontrar una manera de mover todo un directorio

5El calor

1Respuesta

¿Tamaño del bloque de Hadoop y problema con el tamaño del archivo?

Esto podría parecer una pregunta tonta pero en Hadoop supongamos que blocksize es X (típicamente 64 o 128 MB) y un tamaño de archivo local es Y (donde Y es menor que X). Ahora cuando copie el archivo

12El calor

5Respuesta

Transferir archivo desde HDFS

Quiero transferir archivos de HDFS al sistema de archivos local de un servidor diferente que no está en el cluster hadoop pero en la red. que podría haber hecho: hadoop fs -copyToLocal <src> <dest> a

7El calor

2Respuesta

Copiando archivo desde HDFS a la máquina local

Tengo un problema al tratar de "descargar" el archivo del sistema de archivos HDFS a mi sistema local. (aunque la operación opuesta funciona sin problemas). * Nota: El archivo existe en el sistema de

5El calor

1Respuesta

No se puede iniciar daemons utilizando start-dfs.sh

Estamos utilizando la distribución cdh4-0.0 de cloudera. No podemos iniciar los daemons utilizando el siguiente comando. >start-dfs.sh Starting namenodes on [localhost] [email protected]'s password:

24El calor

5Respuesta

Cómo encontrar el tamaño de un archivo HDFS

¿Cómo encontrar el tamaño de un archivo HDFS? Qué comando se debe usar para encontrar el tamaño de cualquier archivo en HDFS.

8El calor

2Respuesta

Diferencia entre PIG local y mapreduce mode

¿Cuál es la diferencia real entre ejecutar secuencias de comandos PIG localmente y en mapreduce? Entiendo que el modo mapreduce es cuando lo ejecuta en un clúster que tiene hdfs instalados. ¿Significa

8El calor

1Respuesta

¿Dónde están almacenados mis archivos (dir) cuando utilicé el hadoop fs -mkdir?

Soy totalmente nuevo en hadoop y acabo de instalar lo que me llevó 2 días ... Ahora estoy intentando con el comando hadoop dfs, pero simplemente no lo entendía, aunque he estado navegando por días , n