Map Reducir es un patrón que parece obtener mucha tracción últimamente y empiezo a verlo manifiesto en uno de mis proyectos que está enfocado en un oleoducto de procesamiento de eventos (iPhone acelerómetro y datos de GPS). Necesitaba construir una gran cantidad de infraestructura para este proyecto, de hecho sobrepasa el código lógico que interactúa con él por 2x. Algunos de los componentes que construí fueron EventProcessors (con buffer de entrada y salida, timing, etc.), EventListeners, Aggregators y Pipeline en etapas.Map Reducir marcos/Infraestructura
Esto me lleva a mi pregunta cuál es la infraestructura requerida "común" para la reducción del mapa. Como estoy trabajando mucho con .Net, puedo ver mapas de infraestructura reducida en el Framework y construcciones de lenguaje. Los lenguajes funcionales respaldan este paradigma per se. Parece que todos los idiomas se pueden usar con la reducción de mapa. Incluso hay idiomas construidos alrededor de ese concepto (por ejemplo, Ir).
Apache Hadoop trae Map-Reduce a Java. Google tiene patented a map-reduce framework. ¿Qué tipo de infraestructura proporcionan para permitir la reducción de mapas? ¿Cuáles son los constructos exhibidos en los lenguajes funcionales para implementar map reduce? ¿Qué necesita/debe proporcionar un marco map-reduce?
Foudn esta publicación interesante últimamente relacionada con MapReduce en .NET 4.0: http://ox.no/posts/minimalistic-mapreduce-in-net-4-0-with-the-new-task-parallel-library -tpl –
Gracias por el enlace, pero no es demasiado profundo sobre el tema. –
Hadoop no "intenta" llevar MR a Java. Es utilizado por Facebook y Yahoo para procesar PB de datos. Eso es más que "intentar". – skaffman