Do controle operacional à inteligência de negócios: a jornada da Connect2B com Data Lake na AWS

A Connect2B, agência de marketing em crescimento acelerado, enfrentava desafios com dados dispersos em planilhas e relatórios inconsistentes. Em parceria com a Dati e a Grow Cloud, foi implementado um Data Lake moderno na AWS, estruturado em camadas (bronze, silver, gold) e integrado ao Amazon QuickSight. A solução proporcionou governança sustentada por uma arquitetura integral, automação completa dos pipelines de dados e dashboards estratégicos em tempo real. O resultado foi a consolidação de uma cultura orientada a dados, com redução significativa de tempo em análises, aumento de confiabilidade e preparação para a adoção de inteligência artificial e GenAI.


Contexto e desafios

A Connect2B enfrentava um desafio comum a empresas em crescimento acelerado: a dificuldade em consolidar informações críticas de negócio que estavam dispersas em planilhas manuais e relatórios isolados. A ausência de governança adequada, a dependência de processos manuais custosos e a falta de integração entre áreas tornavam lenta a tomada de decisão e expunham a operação a riscos de inconsistência e falta de confiabilidade. Diante desse cenário, a empresa decidiu investir em uma infraestrutura moderna de dados capaz de sustentar sua evolução estratégica.

“Nossa realidade era como a de muitas empresas em crescimento: relatórios espalhados, dependência de planilhas e dificuldade em ter uma visão única do negócio. A implementação do Data Lake na AWS mudou completamente esse cenário. Hoje, acessamos dashboards atualizados em tempo real, com segurança e clareza. Isso nos deu agilidade, confiança e base para decisões muito mais estratégicas”.

Gabriel Xavier, Sales Operation Executive na Connect2B. 

Arquitetura implementada

Em parceria com a Dati e a Grow Cloud, a Connect2B estruturou um Data Lake moderno na Amazon Web Services (AWS), concebido para centralizar, processar e disponibilizar dados de forma segura, escalável e automatizada. A arquitetura adota o modelo em camadas Bronze, Silver e Gold, com armazenamento no Amazon S3 e ingestão via AWS Database Migration Service (DMS) Serverless, o que garante integração fluida com sistemas legados.

O processamento e normalização ocorrem no AWS Glue, que também sustenta a governança de metadados com o Data Catalog e o formato Apache Iceberg, assegurando versionamento e rastreabilidade. A execução diária dos pipelines é coordenada pelo AWS Step Functions, com automações no AWS Lambda e agendamentos pelo EventBridge Scheduler, eliminando a dependência de intervenções manuais.

Para consultas e análise, o Amazon Athena viabiliza exploração ad-hoc, enquanto o Amazon QuickSight Enterprise, com o motor SPICE, entrega dashboards interativos e de alta performance. A governança de dados é reforçada pelo AWS Lake Formation, integrado a políticas de acesso granular via IAM e criptografia com KMS, assegurando conformidade e segurança. 

Principais destaques da arquitetura:

  • Armazenamento: Amazon S3 em camadas Bronze (dados brutos), Silver (dados normalizados) e Gold (dados agregados).
  • Ingestão: AWS DMS Serverless para migração do SQL Server para S3 em Parquet.
  • Processamento: AWS Glue para ETL e agregação, com versionamento em Apache Iceberg.
  • Orquestração: AWS Step Functions para pipelines e AWS Lambda para automações.
  • Governança: AWS Glue Data Catalog e Lake Formation, com acesso granular via IAM e KMS.
  • Visualização e BI: Amazon Athena e Amazon QuickSight Enterprise com SPICE.
  • Automação: EventBridge Scheduler para execuções agendadas e datasets atualizados.
  • Segurança: Privilégio mínimo em IAM, criptografia KMS, VPC Endpoints e mascaramento de dados em ambientes de teste.

Essa arquitetura não apenas eliminou processos manuais, mas também estabeleceu a base para análises avançadas, machine learning e aplicações de GenAI, acelerando a tomada de decisão e fortalecendo a governança corporativa.

“O grande diferencial deste projeto foi unir uma arquitetura de Data Lake moderna, baseada em serviços nativos da AWS, com uma visão de futuro orientada à inteligência artificial. Construímos uma solução que não apenas resolve os desafios atuais de governança e automação, mas também prepara a Connect2B para explorar todo o potencial de machine learning e GenAI sobre os dados. É um case que mostra como a nuvem pode se tornar um motor de inovação”. 

Walter Neto, DATA AI ML Cloud Solution Developer na Dati.

Resultados alcançados

Os resultados foram imediatos. Relatórios antes elaborados manualmente em horas passaram a ser atualizados automaticamente em minutos. Dashboards dinâmicos passaram a refletir diariamente a realidade do negócio.

A governança de dados foi fortalecida, eliminando divergências entre áreas e consolidando a transparência como pilar da operação. A diretoria passou a acessar indicadores estratégicos em tempo real, o time comercial ganhou visibilidade sobre metas e performance, enquanto a área financeira passou a operar com dados estruturados e confiáveis.

Mais do que agilidade e confiabilidade, a Connect2B alcançou um novo nível de maturidade digital, construindo uma base tecnológica preparada para análises avançadas, machine learning e aplicações de GenAI sobre o Data Lake, explorando recursos como Amazon Bedrock e Amazon SageMaker.

Principais avanços:

  • Unificação de dados: múltiplas fontes integradas em um repositório centralizado.
  • Automação completa: eliminação de processos manuais de consolidação.
  • Agilidade analítica: relatórios antes demorados agora são gerados automaticamente, com dashboards diários.
  • Governança e segurança: controle granular de acesso e compliance reforçado.
  • Confiabilidade e transparência: todos os times acessam as mesmas informações, segmentadas por perfil.
  • Base para inovação: arquitetura pronta para análises preditivas e GenAI, com Amazon Bedrock e SageMaker.

Parceria Dati e Grow Cloud

A parceria entre Dati e Grow Cloud foi decisiva para o sucesso da jornada. A Dati liderou o desenho arquitetural, a definição da governança, a implementação da segurança e a visão de futuro conectada à inteligência artificial e à nuvem AWS. A Grow Cloud complementou com uma abordagem consultiva próxima ao negócio, personalizando a camada de consumo e assegurando que cada área da Connect2B tivesse acesso ao que realmente importa. Essa complementaridade garantiu não apenas a entrega técnica, mas também o alinhamento estratégico necessário para que os dados se tornassem um ativo central do crescimento da empresa.

Ao final, o case da Connect2B consolida a Dati como referência em cloud, data lakes e inteligência artificial, e reforça seu papel como parceira estratégica no ecossistema AWS. O projeto transformou a operação da agência e criou uma infraestrutura sólida para crescimento escalável, governança e inovação, posicionando a empresa em um novo patamar de maturidade digital.