Depure fácilmente las asignaciones de datos complejas con vista previa instantánea de datos

By | 2019-08-23T12:18:55+00:00 11 de junio del año 2019.|

Los problemas impredecibles e intermitentes son la ruina de crear y depurar las complejas asignaciones de datos. Puede sentirse como encontrar una aguja en un pajar, especialmente cuando se trata de formatos de datos jerárquicos, como archivos JSON, XML y EDI. Lo que está exacerbando las cosas es el hecho de que los requisitos de manipulación de datos y la cantidad y los tipos de fuentes de datos involucradas pueden cambiar con el tiempo, invalidando los esfuerzos realizados anteriormente y haciendo que los errores de mapeo sean aún más matizados y difíciles de identificar.

El enfoque retrospectivo de la depuración es ineficiente

Tradicionalmente, el proceso de depuración de las asignaciones de datos comienza después de que el flujo de datos se haya ejecutado sin éxito y haya finalizado con un error. Se mueve hacia atrás desde el punto en el que se produce la realización de un error para encontrar el punto exacto en el flujo de datos en el que se introdujo el error.

Este enfoque retrospectivo de rastrear un error hasta su origen es ineficiente, especialmente para depurar flujos de datos complejos que comprenden un conjunto de expresiones, múltiples reglas de calidad de datos, varias fuentes de datos y numerosas transformaciones de datos.

La pregunta es: ¿cómo hacer que el proceso sea más rastreable? Cómo pasar de un enfoque de dónde ocurrió este error a un enfoque más iterativo que permite a los desarrolladores Valida un flujo de datos a medida que lo construyen.?

Depuración en tiempo real con vista previa de datos instantánea

Centerprise presenta un revolucionario motor de vista previa de datos instantáneos que permite a los desarrolladores obtener una vista previa del resultado de su proyecto de mapeo de datos en cualquier paso con un solo clic. No es necesario ejecutar un flujo de datos para tener visibilidad del resultado esperado de su asignación. En lugar, Centerprise permite la prueba y validación de asignaciones en tiempo real al permitir a los usuarios obtener una vista previa de una muestra o de todos los datos a medida que se transforman, mejorando así el tiempo de iteración y proporcionando un ciclo de comentarios más corto para los desarrolladores que trabajan en proyectos complejos de mapeo de datos.

Prevención de errores de mapeo

El mapeo de datos de alta calidad consiste en producir un proceso ETL bien diseñado que se pruebe, valide y optimice para mejorar el rendimiento. Sin embargo, antes de llegar a la fase de validación, los desarrolladores pueden caer en trampas de mapeo comunes (o más complicadas), y como un proceso, el esfuerzo para evitar errores de mapeo debe comenzar lo antes posible en la fase de diseño.

Astera Centerprise ayuda a prevenir los errores de mapeo en el tiempo de diseño al proporcionar a los desarrolladores la capacidad de ver el resultado final de un mapeo ETL, así como los datos sin procesar en cualquier paso del proceso. Esto es particularmente útil cuando se trabaja con proyectos complejos de mapeo de datos, que involucran requisitos avanzados de transformación de datos. Con la capacidad de ver datos entre los componentes del flujo de datos, los usuarios pueden identificar fácilmente los errores de mapeo inesperados, ver la forma en que una transformación o expresión manipula los datos y descubrir el motivo del error.

Por ejemplo, al usar la Vista previa de datos instantánea, puede averiguar si un flujo de datos usa una expresión con una sintaxis no válida sin la necesidad de ejecutar el flujo de datos, obtener detalles completos sobre la causa del error y rectificarlo en tiempo real.

Solución de problemas de errores de mapeo

Ocasionalmente, los errores encuentran su camino en las asignaciones ETL, lo que hace que el flujo de datos termine en un error. Otras veces, un flujo de datos puede ejecutarse con éxito, pero pocos registros pueden tener un error o una advertencia adjunta.

En tales casos, la Vista previa de datos instantánea proporciona detalles completos del motivo del error, así como el número de registros con errores. Hay opciones disponibles para mostrar solo aquellos registros que tienen un mensaje adjunto y ver información de error.

La vista previa instantánea de datos viene incorporada con Astera Centerprise y no requiere que el usuario inicie una sesión de depuración separada para identificar y resolver los errores de mapeo. En su lugar, los desarrolladores pueden crear y depurar simultáneamente flujos de datos de una manera altamente interactiva y acelerar el proceso de iteración.

¿Interesado en usar esta poderosa característica de primera mano? Descargar un versión de prueba gratuita de Astera Centerprise.

herramientas de mapeo de datos