¿Alguien está familiarizado con el trabajo con CloudStore y HDFS? Estoy interesado en ver hasta qué punto se ha escalado CloudStore y cuánto se ha utilizado en la producción. CloudStore parece tener más funciones que HDFS. Al pensar en estos dos sistemas de archivos, ¿qué ventajas prácticas existen?CloudStore vs. HDFS
5
A
Respuesta
2
Steve, Parece que CloudStore debería ser más rápido que el HDFS, ya que está diseñado en C++. También estamos interesados en esta comparación y planeamos usar esto en producción.
Háganos saber si encuentra algo interesante al respecto.
1
CloudStore (o KFS) es ahora Quantcast File System (o QFS). El proyecto actualmente reside en https://github.com/quantcast/qfs, y tiene una página de comparison with HDFS que puede consultar.
Cuestiones relacionadas
- 1. HDFS vs GridFS: ¿Cuándo usar qué?
- 2. Transferir archivo desde HDFS
- 3. ¿Cómo funciona HDFS con append?
- 4. Factor de replicación de HDFS
- 5. Hadoop: comprimir archivo en HDFS?
- 6. Archivos pequeños y bloques HDFS
- 7. Fuente de Hadoop MR: HDFS vs HBase. Beneficios de cada uno?
- 8. HDFS: ¿Cómo se enumeran los archivos recursivamente?
- 9. Actualización de un archivo hadoop HDFS
- 10. Importar datos de HDFS a HBase (cdh3u2)
- 11. Administrar hdfs en modo hadoop pseudo-distribuido
- 12. Hadoop HDFS tamaño máximo de archivo
- 13. Lecturas distribuidas de HDFS sin Map/Reducir
- 14. Hadoop (+ HBase/HDFS) vs MySQL (o Postgres) - Cargas de, datos estructurados independientes para ser procesada y preguntó
- 15. Cómo forzar ALMACENAR (sobrescribir) a HDFS en Pig?
- 16. ¿HDFS encripta o comprime los datos mientras se almacena?
- 17. ¿Dónde HDFS almacena los archivos localmente de forma predeterminada?
- 18. Copiando archivo desde HDFS a la máquina local
- 19. Acerca de la división de archivos Hadoop/HDFS
- 20. Diferencias entre hflush y hsync api en HDFS
- 21. Cómo encontrar el tamaño de un archivo HDFS
- 22. Lectura de un archivo Avro simple desde HDFS
- 23. ¿Cómo copio archivos de S3 a Amazon EMR HDFS?
- 24. Búsqueda de directorios anteriores a N días en HDFS
- 25. cómo encontrar el archivo de BlockName en HDFS hadoop
- 26. J2ME VS Android VS iPhone VS Symbian VS Windows CE
- 27. TagSoup vs Jsoup vs HTML Analizador vs vs HotSax
- 28. 'método' vs. 'mensaje' vs. 'función' vs. '???'
- 29. ACE vs Boost vs Poco vs wxWidgets
- 30. VS 2008 vs VS 2008 Express
"Como está diseñado en C++"? Para los sistemas de archivos distribuidos, donde los problemas de rendimiento generalmente no se derivan directamente de la carga computacional, esperaría que los algoritmos pesaran en mayor cantidad que los idiomas. – drxzcl
Depende de la balanza. A baja escala, eso es correcto. Si un lenguaje administrado impone una sobrecarga del 10%, entonces debe tener un 10% más de servidores. En cierto punto, es más barato escribir algo en C++ que comprar un 10% más de servidores. Sé que la mayoría de la gente no tiene ese problema, pero pronto lo haré. –