BTG Pactual · Software Engineer (Operações) · 2024 – 2026
Monitoramento de transações com reprocessamento
Processos críticos movimentavam milhões de dólares e precisavam ser acompanhados sem perder eventos quando algo falhava no caminho. Construí microsserviços orientados a eventos na AWS, com backup de cada payload para reprocessamento, APIs assíncronas focadas em alta disponibilidade e dashboards em React para risco e operações.
- US$ milhões
- em transações monitoradas
- Replay
- a partir do payload original
- 20+
- fluxos automatizados entregues
Contexto
Operações financeiras no Brasil, Chile, Colômbia e México dependiam de processos que precisavam ser acompanhados de perto: se algo travasse, risco e operações tinham de saber rápido.
O desafio
Em monitoramento, perder um evento é pior do que atrasá-lo. O sistema precisava aguentar picos, falhas de dependências e reprocessar o que deu errado sem intervenção manual arriscada.
O que eu construí
- Entrada assíncrona
- APIs em FastAPI, em ambiente serverless, recebem os eventos rápido e devolvem a resposta sem esperar o processamento.
- Fila no meio
- O SQS desacopla quem produz de quem processa. Um pico ou uma falha temporária vira fila, não erro.
- Backup de cada payload
- Os payloads ficam guardados no DynamoDB e no SQS. Se um processamento falha, ele pode ser refeito a partir do original, sem depender de alguém reenviar.
- Visão para quem decide
- Dashboards em React para analistas de risco e de operações, alimentados por pipelines que extraem dados de várias fontes ao mesmo tempo.
Arquitetura
Decisões e trade-offs
- Durabilidade antes de velocidade
- Guardar o payload antes de processar custa um pouco de armazenamento e garante que nenhum evento depende de sorte.
- Serverless pelo perfil de carga
- Cargas irregulares, com picos, combinam com Lambda e SQS: paga-se pelo uso e a escala acompanha a fila.
- Reprocessar é um caminho normal
- Tratar a falha como parte do fluxo (e não como exceção manual) reduziu o risco operacional de corrigir dados à mão.
Resultados
- Milhões de dólares em transações monitorados, com reprocessamento a partir do payload original.
- Mais de 20 fluxos automatizados em produção, economizando mais de 300 horas por mês para times de Operações na América Latina.
Arquitetura descrita em alto nível por confidencialidade.
O que eu faria a seguir
- Infraestrutura como código para todo o ambiente, para recriar e auditar com um comando.
- Rastreamento distribuído ponta a ponta, para medir o tempo de cada etapa da fila.
Stack
PythonFastAPIAWS LambdaAmazon SQSDynamoDBS3ReactPandasPlaywright