Comandos de base de datos por lotes en Entity Framework 4.0

Question

Mi proyecto actual requiere la sincronización diaria con el sistema externo. La sincronización se basa en una estructura compleja de archivos de importación que se analiza y procesa con una amplia lógica comercial. Debido a la lógica comercial, decidimos hacer esto en código .NET y reutilizar los componentes BL existentes en lugar de escribir la misma lógica en procedimientos almacenados o servicios de integración.

La capa BL se encuentra sobre la capa de acceso a datos EF 4.0. El proceso de implementación actual incluye el lote de importación, rellena todos los cambios en ObjectContext y ejecuta SaveChanges en la transacción. Cuando verifico SQL profiler, veo que EF ejecuta cada cambio de entidad como un solo comando SQL (con su propio viaje de ida y vuelta a DB). Además, parece que estos comandos se ejecutan de forma totalmente secuencial. Así que tengo hasta 100.000 viajes de ida y vuelta a la base de datos para la importación inicial y entre 10.000 - 50.000 viajes de ida y vuelta a la base de datos para la sincronización diaria.

¿Es posible insertar/actualizar/eliminar comandos por lotes de alguna manera por EF mismo o por algún proveedor/extensión?

Answer 1

No, no se puede hacer (sí, yo también lloro).

EF no es compatible con las operaciones por lotes, LINQ-SQL tenía (tiene) el mismo problema.

Usted tiene algunas opciones:

1. procedimientos almacenados
2. ADO.NET clásico o EntitySQL
3. disparadores

he ido con la opción 1 y 3 en el pasado.

El problema con los tres enfoques es que pierdes la abstracción de EF, el gráfico interno (concurrencia optimista) y vuelves al mundo del SQL nativo.

Answer 2

estar al tanto de este proyecto: magiq.codeplex.com

Trae operaciones por lotes a LINQ a SQL y estamos trabajando en apoyo ADO.NET Entity Framework por ahora.

Saludos

Answer 3

Hay algunas soluciones en SQL Server:

• Inserciones de lotes se describen en el artículo Entity Framework Bulk Copy

• actualizaciones por lotes (y elimina) se describen en el artículo de Multiple entity updates with Entity Framework – EF Fetch Updates.

En caso de estar interesado en Oracle, MySQL, PostgreSQL o SQLite, se puede utilizar la última Devart dotConnect providers. El BatchUpdates functionality ya está integrado en el método SaveChanges en las últimas versiones de estos proveedores.

Answer 4

Aquí hay una forma que le permite usar su código POCO primero y es rápido. Subió una inserción a granel de> 1 hora a ~ 5 segundos.

SqlBulkCopy for Generic List (useful for Entity Framework & NHibernate).

Answer 5

Solo compartiendo contigo un proyecto de GitHub solo por eso, a partir de ahora, es compatible con Bulk insert/update/delete para el servidor Sql de forma transparente utilizando SqlBulkCopy. https://github.com/MHanafy/EntityExtensions También hay otras cosas buenas, y con suerte, se extenderá para hacer más en la pista. uso es tan simple como

var insertsAndupdates = new List<object>(); 
var deletes = new List<object>(); 
context.BulkUpdate(insertsAndupdates, deletes); 

espero que ayude!