bases de datos Mantener sincronizados distribuida en una red inestable

Question

que estoy enfrentando el siguiente desafío:

que tienen un montón de bases de datos en diferentes ubicaciones geográficas en las que la red puede fallar mucho (estoy usando la red celular). Necesito mantener todas las bases de datos sincronizadas, pero no es necesario que estén en tiempo real. Estoy usando Java, pero tengo la libertad de elegir cualquier base de datos gratuita.

Cualquier sugerencia sobre cómo puedo lograr esto.

Gracias.

Answer 1

No conozco ninguna base de datos que le brinde esta funcionalidad de fábrica; aquí hay mucha complejidad debido a la necesidad de consistencia final y resolución de conflictos (por ejemplo, qué sucede si la red se divide en 2 mitades, y actualiza algo al valor 123 mientras lo actualizo en la otra mitad a 321, y luego las redes se vuelven a conectar?)

Puede que tenga que hacer su propio.

Para algunas ideas sobre cómo hacer esto, echa un vistazo al diseño del sistema de Yahoo PNUTS: http://research.yahoo.com/node/2304 y el Dynamo de Amazon: http://www.allthingsdistributed.com/2007/10/amazons_dynamo.html

Answer 2

No conozco sus requisitos ni sus aplicaciones, pero esta no es una pregunta de respuesta rápida. Estoy muy interesado en ver lo que otros tienen para decir. Sin embargo, tengo una sugerencia que puede o no funcionar para usted, dependiendo de sus requisitos y situación. particularmente, esto no ayudará si sus usuarios necesitan usar la aplicación incluso cuando la red no está disponible (acceso fuera de línea).

Mantener una cantidad de bases de datos pequeñas sincronizadas es una tarea bastante compleja de realizar correctamente. ¿Hay alguna posibilidad de tener una sola base de datos centralizada y tener las aplicaciones cliente conectadas directamente a ella o (mi solución preferida) escribir algunos servicios web para manejar el acceso/actualización de datos en lugar de tener una gran cantidad de bases de datos de clientes?

Me doy cuenta de que esto limita el acceso sin conexión, pero hay varias estrategias de almacenamiento en caché que puede utilizar. (Lo cual, por supuesto, lo lleva de vuelta a su pregunta original.)

Answer 3

Es un problema con un corpus bastante establecida de la investigación (de los cuales la gente es aparentemente sin darse cuenta) . Sugiero a no reinventar una rueda defectuosa si no es absolutamente necesaria (como, por ejemplo, requisitos tan inusuales para permitir una solución trivial).

Algunas palabras clave: replication, mobile DBMSs, distributed disconnected DBMSs.

también estos trabajos de investigación son relevantes (como un ejemplo de este campo de investigación):

1. Distributed disconnected databases,
   • The dangers of replication and a solution,
   • Improving Data Consistency in Mobile Computing Using Isolation-Only Transactions,
   • Dealing with Server Corruption in Weakly Consistent, Replicated Data Systems,
   • Rumor: Mobile Data Access Through Optimistic Peer-to-Peer Replication,
   • The Case for Non-transparent Replication: Examples from Bayou,
   • Bayou: replicated database services for world-wide applications,
   • Managing update conflicts in Bayou, a weakly connected replicated storage system,
   • Two-level client caching and disconnected operation of notebook computers in distributed systems,
   • Replicated document management in a group communication system,

... y así sucesivamente.

Answer 4

Consulte SymmetricDS. SymmetricDS es un software de replicación/sincronización de datos habilitado para la web, independiente de la base de datos. Utiliza tecnologías web y de bases de datos para replicar tablas entre bases de datos relacionales casi en tiempo real. El software fue diseñado para escalar para una gran cantidad de bases de datos, trabajar en conexiones de bajo ancho de banda y soportar períodos de interrupción de la red.