En un mundo donde las decisiones empresariales rápidas y basadas en datos son cruciales, mantener bases de datos operacionales sincronizadas con sistemas de análisis en tiempo real se ha convertido en una necesidad estratégica. Sin embargo, el desafío radica en cómo replicar datos de manera eficiente y sin afectar el rendimiento de las operaciones diarias.

Este talk explorará cómo utilizar Kafka Connect para replicar datos desde diversas bases de datos operacionales hacia un destino de análisis unificado, como PostgreSQL.

Nos centraremos en herramientas y técnicas específicas como Debezium para la replicación en tiempo real, el conector JDBC Source para hacer backfillings, el conector JDBC Sink para almacenar datos en PostgreSQL, y el uso de Single Message Transformers (SMTs) para transformar datos sobre la marcha.