Allan Simões AdegasEnglish
Menu
Voltar para o início

BTG Pactual · Software Engineer (Operações) · 2024 – 2026

Monitoramento de transações com reprocessamento

Processos críticos movimentavam milhões de dólares e precisavam ser acompanhados sem perder eventos quando algo falhava no caminho. Construí microsserviços orientados a eventos na AWS, com backup de cada payload para reprocessamento, APIs assíncronas focadas em alta disponibilidade e dashboards em React para risco e operações.

US$ milhões
em transações monitoradas
Replay
a partir do payload original
20+
fluxos automatizados entregues

Contexto

Operações financeiras no Brasil, Chile, Colômbia e México dependiam de processos que precisavam ser acompanhados de perto: se algo travasse, risco e operações tinham de saber rápido.

O desafio

Em monitoramento, perder um evento é pior do que atrasá-lo. O sistema precisava aguentar picos, falhas de dependências e reprocessar o que deu errado sem intervenção manual arriscada.

O que eu construí

Entrada assíncrona
APIs em FastAPI, em ambiente serverless, recebem os eventos rápido e devolvem a resposta sem esperar o processamento.
Fila no meio
O SQS desacopla quem produz de quem processa. Um pico ou uma falha temporária vira fila, não erro.
Backup de cada payload
Os payloads ficam guardados no DynamoDB e no SQS. Se um processamento falha, ele pode ser refeito a partir do original, sem depender de alguém reenviar.
Visão para quem decide
Dashboards em React para analistas de risco e de operações, alimentados por pipelines que extraem dados de várias fontes ao mesmo tempo.

Arquitetura

Arquitetura: Monitoramento de transações com reprocessamentoFontes → APIs FastAPI. APIs FastAPI → Amazon SQS. Amazon SQS → AWS Lambda. AWS Lambda → DynamoDB. DynamoDB → Dashboards. AWS Lambda → Reprocessamento. Reprocessamento → Amazon SQSconsultafalhouFontesprocessos críticosAPIs FastAPIassíncronas, serverlessAmazon SQSabsorve picosAWS LambdaprocessadoresDynamoDBestado e backupDashboardsReactReprocessamentoa partir do backup
Visão simplificada. Nomes e detalhes internos foram omitidos.

Decisões e trade-offs

Durabilidade antes de velocidade
Guardar o payload antes de processar custa um pouco de armazenamento e garante que nenhum evento depende de sorte.
Serverless pelo perfil de carga
Cargas irregulares, com picos, combinam com Lambda e SQS: paga-se pelo uso e a escala acompanha a fila.
Reprocessar é um caminho normal
Tratar a falha como parte do fluxo (e não como exceção manual) reduziu o risco operacional de corrigir dados à mão.

Resultados

  • Milhões de dólares em transações monitorados, com reprocessamento a partir do payload original.
  • Mais de 20 fluxos automatizados em produção, economizando mais de 300 horas por mês para times de Operações na América Latina.
09001.8002.7003.6001234567891011123.600 horasmês
Projeção para 12 meses, mantendo 300 horas economizadas por mês.

Arquitetura descrita em alto nível por confidencialidade.

O que eu faria a seguir

  • Infraestrutura como código para todo o ambiente, para recriar e auditar com um comando.
  • Rastreamento distribuído ponta a ponta, para medir o tempo de cada etapa da fila.

Stack

PythonFastAPIAWS LambdaAmazon SQSDynamoDBS3ReactPandasPlaywright