¿Qué significa "Masaje de datos"?

Question

Estoy leyendo un poco, y me encontré evitando una tienda interna si mi aplicación no necesita hacer un masaje de los datos antes de enviarlos a SQL. ¿Qué es un masaje de datos?

Answer 1

Manipular, procesar, alterar, recalcular. En resumen, si solo está moviendo los datos en formato raw, entonces no es necesario usar internalStore, pero si le está haciendo algo antes del almacenamiento, entonces es posible que desee una InternalStore.

-Adam

Answer 2

limpieza, la normalización, filtrado, ... Simplemente cambiar los datos de alguna manera de la entrada original a una forma que se adapta mejor a su uso.

Answer 3

A veces todo el proceso de movimiento de datos se conoce como "ETL", que significa "Extraer, transformar, cargar". Masajear los datos es el paso de "transformación", pero implica correcciones ad-hoc que debe hacer para suavizar los problemas que ha encontrado (como lo hace un masaje con sus músculos) en lugar de transformaciones entre formatos bien conocidos.

piensa que usted podría hacer a los datos "masaje" incluyen:

• cambiar los formatos de lo que el sistema de fuente emite a lo que el sistema de destino espera, por ejemplo, cambiar el formato de fecha de d/m/y a m/d/y.
• reemplazar los valores faltantes con los valores predeterminados, p. Suministre "0" cuando no se da una cantidad.
• Filtrar registros que no son necesarios en el sistema de destino.
• Verifique la validez de los registros e ignore o informe sobre las filas que causarían un error si intentara insertarlos.
• Normalice los datos para eliminar las variaciones que deberían ser iguales, p. reemplace la mayúscula con la minúscula, reemplace "01" con "1".

Answer 4

Y, finalmente, existe la práctica menos sabrosa de masajear los datos mediante el envío de datos (o el ajuste de los números) cuando no le dan la respuesta que desea. Desafortunadamente, la gente que hace análisis estadísticos a menudo da masajes a los datos para deshacerse de esos molestos valores atípicos que refutan su teoría. Debido a esta práctica que se refiere a la limpieza de datos como la acumulación de los datos es inapropiado. Limpiar los datos para convertirlos en algo que pueda entrar en su sistema (deshacerse de fechas sin sentido como 30/02/2009 porque otra persona los almacenó en varchar en lugar de como fechas, separando los nombres y apellidos en campos separados, corrigiendo todos los datos en mayúsculas , agregar valores predeterminados para los campos que requieren datos cuando no se proporcionan los datos suministrados, etc.) es una cosa: masajear los datos implica una práctica de ajustar los datos de forma inapropiada.