English
A. Cartola

not available in EN. Showing the English version.

Engineering

Pipeline de eventos near-real-time

Ingestão de eventos com Kafka e orquestração em Airflow, com testes de contrato.

Role
Data Engineering
Period
2023
Stack
  • Kafka
  • Airflow
  • Python
  • dbt

Contexto

TODO: copy PT, necessidade de dados frescos.

Arquitetura

TODO: copy PT, ingestão, orquestração e camadas.

Operação

TODO: copy PT, confiabilidade e monitoramento.