12
¿Cómo puedo ver en cuántos bloques se ha roto un archivo en un sistema de archivos Hadoop?Visualización del número de bloques para un archivo en hadoop
A
Respuesta
34
Podemos usar el comando de comprobación del sistema de archivos hadoop para conocer los bloques del archivo específico.
A continuación se muestra el comando:
hadoop fsck [path] [options]
Para ver los bloques para el archivo específico:
hadoop fsck /path/to/file -files -blocks
-1
Esto debería funcionar ..
hadoop fs -stat "%o" /path/to/file
1
Hadoop fsck filetopath
usó el commad anterior en CDH 5. Obtuve el siguiente error.
Hadoop-hdfs/bin/HDFS: Línea 262: Ejecutivo:: No encontrado
Utilice el siguiente comando y funcionó bien
hdfs fsck filetopath
Cuestiones relacionadas
- 1. Vimdiff: visualización del número total de cambios
- 2. Hadoop MapReduce - un archivo de salida para cada entrada
- 3. número de visualización en Google Maps Marcador para
- 4. Visualización de un archivo eliminado en Git
- 5. Visualización del archivo .doc con java applet
- 6. Actualización de un archivo hadoop HDFS
- 7. Hadoop: comprimir archivo en HDFS?
- 8. ¿Tamaño del bloque de Hadoop y problema con el tamaño del archivo?
- 9. Visualización del algoritmo para C#
- 10. Visualización del tamaño del archivo: 1000b = 1kb o 1024b = 1kb?
- 11. Eliminando bloques de texto del archivo de texto enorme
- 12. Scala/Hadoop: Especificación del contexto para Reducer
- 13. ¿Cómo calcula el comando stat los bloques de un archivo?
- 14. Visualización del progreso de copia de archivo usando FSCopyObjectAsync
- 15. "-format hadoop NameNode" devuelve un java.net.UnknownHostException hadoop
- 16. Hadoop MapReduce: Tamaño de archivo de entrada apropiado?
- 17. Hadoop o Hadoop Streaming para MapReduce en AWS
- 18. ¿Es posible obtener un número de versión del archivo XAP
- 19. Archivos pequeños y bloques HDFS
- 20. Instale un archivo independientemente del número de versión con WiX
- 21. ejecutar un trabajo Hadoop sin archivo de salida
- 22. Hadoop HDFS tamaño máximo de archivo
- 23. número de páginas en un archivo pdf
- 24. Número de selectores en un archivo css
- 25. Forzar instalador para actualizar un archivo en el GAC independientemente del número de versión
- 26. Cambiar la visualización del ticket en Trac
- 27. Visualización del cumplimiento W3C
- 28. Visualización de visualización de mapa de árbol para la salida del generador de perfiles de Python
- 29. Comparación del número de versión dentro del archivo MAKE
- 30. Exportar un archivo MAKE de bloques de código
'% o' es el tamaño de bloque, no el número de bloques, por http://hadoop.apache.org/docs/r2.7.0/hadoop-project-dist/hadoop-common/FileSystemShell.html#stat – Nickolay