tareas de la Biblioteca paralelo para recorrido de directorio

Question

me gustaría recorrer un directorio en el disco duro y buscar a través de todos los archivos para una cadena de búsqueda específica. Esto suena como el candidato perfecto para algo que podría (o debería) hacerse en paralelo ya que el IO es bastante lento.

Tradicionalmente, escribía una función recursiva para encontrar y procesar todos los archivos en el directorio actual y luego recurse en todos los directorios en ese directorio. Me pregunto cómo puedo modificar esto para ser más paralelo. Al principio simplemente Modificado:

foreach (string directory in directories) { ... } 

a

Parallel.ForEach(directories, (directory) => { ... }) 

pero siento que esto podría crear demasiadas tareas y obtener sí en nudos, sobre todo cuando se trata de enviar de nuevo en un hilo de interfaz de usuario. También siento que el número de tareas es impredecible y que esta podría no ser una forma eficiente de paralizar (¿es una palabra?) Esta tarea.

Alguien ha hecho con éxito algo como esto antes? ¿Qué consejo tienes al hacerlo?

Answer 1

No, esto no suena como un buen candidato para el paralelismo precisamente porque el IO es lento. Estarás en el disco. Suponiendo que solo tiene un disco, realmente no desea hacer que busque múltiples lugares diferentes al mismo tiempo.

Es un poco como tratar de conectar varias mangueras al mismo grifo con el fin de sacar el agua más rápido - o tratando de ejecutar 16 hilos vinculados a la CPU en un solo núcleo :)