Usando .Net Parallel Extensions (Parallel.Invoke) para múltiples llamadas asincrónicas?

Question

Actualmente tengo una sección de código que necesita realizar aproximadamente 7 llamadas de servicio web a varios proveedores de datos. Cada llamada tarda unos segundos en ejecutarse, por lo que me gustaría ejecutarlas en paralelo para acelerar las cosas.

He envuelto mis 7 llamadas en un Parallel.Invoke la que funciona muy bien en el funcionamiento de un par de cosas al mismo tiempo, pero en un servidor central 2, que sólo ejecutará 2 a la vez, uno por núcleo. Como todo lo que hago es esperar a que regresen las llamadas del servicio web, me gustaría que fuera a buscar las 7 y esperar a que regresen.

¿Hay alguna manera de hacer esto? ¿O tal vez mi enfoque es incorrecto? Tal vez necesito crear llamadas asincrónicas a los servicios web? Pero ¿cómo esperar a que todos regresen antes de seguir?

Answer 1

pero en un servidor central 2, sólo se ejecutará 2 a la vez, uno por núcleo

cuestionaría esto - Parallel.Invoke normalmente se ejecutará muchas más tareas que los núcleos en su sistema .

Dicho esto, si utiliza invocaciones de llamada de método asíncrono, le recomendaría usar Task.Factory.FromAsync(...) para generar sus siete tareas distintas.

Esto proporciona la flexibilidad de realizar otro trabajo mientras se ejecutan las tareas, y luego llamar al Task.WaitAll (o Task.WaitAny) cuando decide usar los resultados.

Paralelo.Invocar, por el contrario, siempre se bloqueará hasta que se completen las siete.

Answer 2

Puede especificar ParallelOptions para aumentar el nivel de concurrencia. El valor predeterminado es razonable para las tareas vinculadas a la CPU, pero se trata de las vinculadas a E/S, por lo que tiene sentido anular ese comportamiento.

Answer 3

No es necesario utilizar Parallel.Invoke para esto. Puede continuar y emitir las múltiples solicitudes asíncronas (es decir, HttpWebRequest.BeginGetResponse()). En cuanto a recibir una notificación cuando todos se completen, tiene varias opciones. Una manera simple sería inicializar un CountdownEvent antes de emitir la primera solicitud, y luego tener el hilo principal en espera en ese evento después de que se emitan las solicitudes. Los métodos de devolución de llamada asíncrona cada señal ese evento a medida que se completan. De esta forma, se asegura de que todas las solicitudes se hayan completado antes de que su hilo principal continúe.

Answer 4

Voy a copiar a response that I made to another question al pie de la letra porque es igual, si no más, aplicable aquí.

---

Simplemente no se puede superar el modelo de programación asíncrona (APM) cuando se trata de rendimiento de E/S. Cada vez que puedas usarlo, deberías serlo. Afortunadamente, la Task Parallel Library (TPL) viene con soporte para combinar el trabajo de APM en la mezcla con tareas TPL "puras" a través del the FromAsync factory method.

Consulte esta sección del .NET SDK en MSDN titulada TPL and Traditional .NET Asynchronous Programming para obtener más información sobre cómo combinar estos dos modelos de programación para lograr async nirvana.