Great Expectations: Validar data pipelines como un profesional

Aceptada

Cuando hablamos de validaciones lo primero que pensamos es en el código, unit test, integration tests, etc. Pero ¿Quién mira a los datos? Great Expectations!

Tipo: Charla estandard, 25 minutos

Nivel: Medio

Disertantes: Eric Rishmüller

Biografiá del Disertante: Ingeniero de datos en Mutt Data. Analista de sistemas de Ort. Intento de youtuber

Horario: 19:00 - 19:30 - 26/11/2020

Sala: Sala 1

Etiquetas/Tags: great expectations data engineering data quality data pipelines data-driven apps airflow workflows productivity qa qc

Descripción completa

En esta charla vamos a desarrollar la importancia de implementar validaciones a nuestros datos dentro de un pipeline. Para esto mostraremos un prometedor framework de validaciones y cómo se integra dentro de un complejo pipeline con múltiples sistemas alimentando la entrada.