Java ORM para Hbase

Question

Cualquiera conoce una buena implementación de Java ORM para HBase. Este se ve muy agradable para Ruby

http://www.stanford.edu/~sqs/rhino/doc/

Pero no podía encontrar uno para Java.

Gracias.

Answer 1

Hay pigi y parhely y no he usado ninguno de ellos. IMO HBase es un motor de almacenamiento clave/valor rápido, pero si necesita otra capa de abstracciones, debería verificarlas.

Answer 2

La fuerza de HBase, como yo lo veo, es mantener columnas dinámicas en familias de columnas estáticas. A partir de mi experiencia en el desarrollo de aplicaciones con HBase, encuentro que no es tan fácil como SQL determinar los valores y calificadores celulares.

Por ejemplo, un libro como muchos autores, dependiendo de sus patrones de acceso, ediciones de autor, aplicación de caché de capa de aplicación, puede elegir guardar autor completo en la tabla de libro (es decir, el autor reside en 2 tabla, autor mesa y mesa de libro) o solo la identificación del autor. Además, la colección de autor se puede guardar en una celda como XML/JSON o celdas individuales para autores individuales.

Con este entendimiento, llegué a la conclusión de que escribir un ORM en toda regla, como por ejemplo Hibernate, no solo será muy difícil, podría no ser concluyente. Así que tomé un enfoque diferente, mucho más como iBatis es Hibernate.

• Mi mini-marco: http://github.com/smart-it/smart-dao [smart-hbase]
• Uso: https://github.com/smart-it/smart-cms [módulo de contenido-spi-impl tiene los usos]
• Uso: https://github.com/smart-it/jetty-session-hbase [módulo hbase-impl tiene los usos]

Déjame intentar explicar cómo funciona. Para esto, utilizaré los códigos fuente de here y here.

1. La primera y más importante tarea es implementar una interfaz ObjectRowConverter, en este caso SessionDataObjectConverter. La clase abstracta resume las mejores prácticas básicas tal como se discutió y aprendió de la comunidad HBase. La extensión básicamente le da un control del 100% sobre cómo convertir su objeto a la fila HBase y viceversa. Para esto, solo la restricción de la API es que los objetos de su dominio deben implementar la interfaz PersistentDTO que se usa internamente para crear Put, Delete, do byte [] para el objeto id y viceversa.
2. La siguiente tarea es cablear las dependencias como se hace en HBaseImplModule. Por favor, avíseme si está interesado, revisaré las inyecciones de dependencia.

Y eso es todo. Cómo se usan están disponibles here. Básicamente usa CommonReadDao, CommonWriteDao para leer y escribir datos hacia y desde HBase. La lectura común dao implementa la conversión multiproceso de fila a objeto en las consultas, obtención múltiple mediante identificadores, obtención por identificación y tiene su API de criterios de Hibernate como para consultar a HBase mediante exploración (no hay funciones de agregación disponibles). La escritura común dao implementa código relacionado de escritura común con algunas funciones adicionales, como bloqueo optimista/pesimista, anulación de celda/entidad de comprobación de fusión (no) -existencia en guardar, actualizar, eliminar, etc.

Este ORM se ha desarrollado para nuestro propósito interno y he estado hasta mi cuello y por lo tanto todavía no puedo hacer algo de documentación.Pero si está interesado, hágamelo saber y yo se hacer tiempo para la documentación con prioridad.

Answer 3

¿Qué tal DataNucleus: se puede usar JPA o JDO como su API y hbase como el almacén de back-end: http://www.datanucleus.org/plugins/store.hbase.html

Answer 4

Estamos utilizando HBase ORM - Suro https://github.com/mushkevych/surus/wiki

Probablemente vale la pena mencionar

• lo estamos usando en gran medida con Hadoop map/reduce
• tiene un módulo extra que le permite bombear datos HBase desde la secuencia JSON (en nuestro caso proviene del código Python)

Answer 5

Recientemente una nueva versión de kundera-2.0.4 que es ORM sobre Hbase. Proporciona una amplia de otras cosas que son muy útiles, como la indexación, cruz almacén de datos de persistencia etc.

sugiero que darle una oportunidad https://github.com/impetus-opensource/Kundera

jar ejecutable se encuentra en:

https://github.com/impetus-opensource/Kundera

Answer 6

Hibernate OGM es una buena solución para bases de datos que no son SQL. Pruébalo.

http://www.hibernate.org/subprojects/ogm.html

Answer 7

puede probar esto: http://code.google.com/p/hbase-ormlite/. Este es un orm para HBase en Java.