André Camargo — Senior Data Engineer & Databricks Architect

Sobre mim

Quem sou eu

Engenheiro de Dados especializado em arquitetura, engenharia e governança de dados, atuando na construção de plataformas escaláveis voltadas para analytics, automação e inteligência artificial. Especialista em Databricks, Azure, Python, Spark e SQL, com experiência em pipelines de alto volume, Data Lakehouse, modelagem analítica e integração entre múltiplas fontes de dados.

Founder da ACX Developing Beyond, desenvolvendo soluções voltadas para inteligência artificial, automações inteligentes, engenharia de dados e plataformas analíticas. Atuo com clientes como Portobello, Aramis e Unimed entregando arquiteturas modernas com foco em performance, escalabilidade e IA aplicada.

🇧🇷 Campinas, SP 💼 Aberto a projetos ACX Developing Beyond

6+ Anos de experiência

38+ Projetos entregues

∞ Dados processados

Trajetória

Experiência

nov 2024 — Presente Atual

Engenheiro de Dados — Founder

ACX Developing Beyond · Campinas, SP (Remote)

Liderança técnica em projetos de Data Lakehouse com arquitetura Medallion (Bronze/Silver/Gold). Clientes: Portobello (AWS + Databricks), Aramis (Databricks + Plataforma de IA Corporativa + n8n), Unimed (analytics operacional), Rede Âncora (governança Databricks + Unity Catalog).

Databricks PySpark Delta Lake AWS Azure n8n Airflow Gen AI

nov 2021 — nov 2024 3 anos

Engenheiro de Dados

NTConsult · Campinas, SP

Liderança técnica em migração e otimização de pipelines no Databricks (Azure). Desenvolvimento de soluções com arquitetura Medallion, Data Quality, ETL distribuído com PySpark e integração com Power BI. Projeto AWS + Hadoop com Apache Airflow e PySpark.

Databricks PySpark Azure AWS Airflow Power BI Delta Lake

nov 2019 — jan 2021 1 ano

Analista de Dados e BI

Algar Tech · Campinas, SP

Criação de dashboards operacionais para call center, consumo de dados via SQL, DataViz e automações em Python. Análise de KPIs e construção de soluções visuais de alto impacto para diferentes equipes.

SQL Power BI Python DataViz

jun 2018 — nov 2019 1,5 anos

Especialista em MIS

Alert Brasil · Campinas, SP

Criação de Data Warehouse em SQL Server com modelagem Star Schema e Snowflake. Automações ETL e RPA em Python, dashboards em Power BI e QlikView, stored procedures otimizadas.

SQL Server Power BI QlikView Python ETL / RPA

Tech Stack

Habilidades

Languages

Python PySpark SQL Bash JavaScript

Data Platform

Databricks Delta Lake Apache Airflow Medallion Architecture Unity Catalog Pentaho

Cloud & Infra

Azure AWS FastAPI PostgreSQL Docker Git

AI & Analytics

AI Agents Claude / Anthropic SDK n8n Power BI Tableau LangChain

Data Architecture

Arquitetura Medallion

Padrão que implemento no Databricks para organizar dados em camadas de qualidade crescente — da ingestão bruta até métricas de negócio prontas para consumo.

📥

Fontes

ERP · APIs · DBs · Files

→

🥉

Bronze

Dados brutos · Schema-on-read

→

🥈

Silver

Limpos · Validados · Deduplicados

→

🥇

Gold

Agregados · KPIs · Negócio

→

📊

Consumo

Power BI · APIs · ML

silver_pipeline.py

# Silver layer — limpeza e validação dos dados Bronze
from pyspark.sql import functions as F

bronze_df = spark.readStream.format("delta") \
    .table("bronze.orders_raw")

silver_df = (bronze_df
    .filter(F.col("order_id").isNotNull())
    .withColumn("event_date", F.to_date("event_timestamp"))
    .withColumn("amount",     F.col("amount").cast("decimal(18,2)"))
    .dropDuplicates(["order_id", "event_date"])
    .select("order_id", "customer_id", "event_date", "amount", "status"))

(silver_df.writeStream
    .format("delta")
    .outputMode("append")
    .option("checkpointLocation", "/checkpoints/silver/orders")
    .toTable("silver.orders"))

Trabalhos

Projetos em destaque

🎼

Em destaque

Orchestra AI

Plataforma proprietária de orquestração de notebooks e agentes de dados. O usuário monta workflows em lista linear ou DAG (grafo dirigido acíclico) — cada etapa é um notebook .ipynb convertido e executado automaticamente em Python, com instalação automática de dependências. Suporta agendamento via cron, monitoramento em tempo real de logs e autenticação JWT. Na prática, orquestra os pipelines da ACX: coleta de imóveis no OLX, classificação por IA, envio via WhatsApp e agentes de prospecção.

React 19 Node.js + Express MySQL + Prisma Python 3 Cron / DAG Docker JWT

Ver empresa →

🏗️

Data Lakehouse Platform

Arquitetura Medallion (Bronze/Silver/Gold) em Databricks com Delta Lake, orquestrada pelo Airflow. Governança com Unity Catalog, Data Quality em cada camada, integração multi-cloud (AWS + Azure) e processamento de alto volume com PySpark.

Databricks PySpark Delta Lake Airflow Unity Catalog

🤖

Plataforma de IA Corporativa

Plataforma corporativa de IA com agentes inteligentes e automações via n8n. Integração entre Databricks, APIs corporativas e IA Generativa para disponibilização de métricas em tempo real e framework de Code Review com IA.

Databricks n8n Gen AI Power BI APIs

❤️

Um Novo Lar

Projeto de acolhimento e reinserção social para pessoas em situação de rua. Iniciativa com propósito de gerar impacto real na vida de quem mais precisa, conectando tecnologia e responsabilidade social.

Impacto Social Voluntariado

🏢

ACX Developing Beyond

Empresa de tecnologia fundada para desenvolver soluções inovadoras em engenharia de dados, IA e automação. Atende clientes enterprise entregando plataformas modernas de dados com Databricks, Azure e IA Generativa.

Startup Data Engineering AI Solutions

acxdevbeyond.com.br →

Formação