Português
A. Cartola
Engineering

Pipeline de eventos near-real-time

Ingestão de eventos com Kafka e orquestração em Airflow, com testes de contrato.

Papel
Data Engineering
Período
2023
Stack
  • Kafka
  • Airflow
  • Python
  • dbt

Contexto

TODO: copy PT, necessidade de dados frescos.

Arquitetura

TODO: copy PT, ingestão, orquestração e camadas.

Operação

TODO: copy PT, confiabilidade e monitoramento.