Arthur Reis
Engenheiro de Dados e IA
Databricks · Azure · Microsoft Fabric
Engenheiro de Dados e IA especializado em Databricks, Azure e Microsoft Fabric. Construo plataformas de dados modernas, arquiteturas lakehouse, pipelines de alta performance e frameworks de qualidade de dados, e exploro IA aplicada com sistemas multi-agente. Compartilho o que aprendo em palestras, vídeos no Youtube, blogs, no LinkedIn e em projetos open source.
Experiência
- set. de 2025 — Atual
Engenheiro de Dados Consultor · Power Tuning
Brasil · RemotoEstratégia e modernização de plataformas de dados nacionais e internacionais com Microsoft Fabric e Databricks.
- Design e deploy de Data Platform para multinacional brasileira usando Microsoft Fabric e Databricks, alinhando soluções técnicas a objetivos de negócio e governança.
- Arquitetura e deploy de workflows de dados via Infrastructure as Code (IaC) com Azure Data Factory, garantindo pipelines escaláveis, mantíveis e auditáveis.
- Design e implementação de Lakehouse completo e produtos de IA usando Databricks e Azure.
- Implementação de Databricks Genie Spaces como interface de analytics conversacional sobre os dados da plataforma.
Microsoft Fabric Databricks Azure Azure Data Factory PySpark SQL Python - mar. de 2026 — Atual
Engenheiro de Dados · AB InBev (Miners)
Brasil · RemotoProjetos de Engenharia de Dados e IA com foco em Databricks, GitHub e Airflow.
- Manutenção de pipelines de dados no Databricks e no Airflow.
- Migração e refatoração de código Spark e SQL.
- Criação de um sistema multi-agente para acelerar migrações usando Databricks Genie.
- Criação de um sistema multi-agente para revisão de PRs usando OpenAI e GitHub Actions.
Databricks Apache Airflow GitHub Actions PySpark SQL Databricks Genie OpenAI - mai. de 2025 — set. de 2025
Engenheiro de Dados · Kumulus
Brasil · RemotoEstratégia de dados, design de plataformas e implementação para clientes nacionais e internacionais.
- Liderança de estratégia de plataforma de dados e design de arquitetura Lakehouse para multinacional americana, definindo padrões de governança, modelos de dados e estrutura alinhada aos objetivos do cliente.
- Contribuição à modernização de plataforma de dados para organização governamental dos EUA, mapeando maturidade de dados e conduzindo adoção junto a stakeholders internacionais.
- Design e implementação de soluções Lakehouse para duas empresas brasileiras, incluindo frameworks de governança e controles de qualidade de dados.
- Mentoria e supervisão de Engenheiros de Dados Júnior, contribuindo para a definição de topologia de equipe.
- Implantação de Microsoft Copilot para aumentar a produtividade das equipes de dados nos clientes.
Databricks Azure Python SQL Delta Lake - abr. de 2024 — mai. de 2025
Engenheiro de Dados · Paytime
Brasil · RemotoResponsável pela estratégia de dados end-to-end da empresa, do zero: infraestrutura, governança, qualidade e analytics.
- Design e implementação do Data Lakehouse (Databricks, Spark, SQL, MongoDB, AWS) como base para produtos de dados e analytics self-service.
- Estabelecimento de práticas de governança: pipelines de testes de qualidade, padrões de documentação e políticas de controle de acesso.
- Design e entrega dos primeiros produtos de dados da empresa: dashboards interativos em Power BI para stakeholders de negócio.
- Implementação de serviços de dados na AWS (S3, Lambda, Glue, IAM) para infraestrutura segura e escalável.
- Exploração e implementação de Databricks Genie Spaces para analytics conversacional sobre os dados da empresa.
Databricks Apache Spark AWS MongoDB Power BI Python SQL - set. de 2023 — mar. de 2024
Analista de Dados · Piwi
Brasil · RemotoGestão da estratégia de dados end-to-end da empresa, da ingestão ao analytics.
- Liderança do desenvolvimento do Lakehouse da empresa no GCP, definindo a estratégia de arquitetura e gestão escalável de dados.
- Design e lançamento dos primeiros produtos de analytics com Looker Studio, habilitando BI self-service.
- Desenvolvimento de pipelines de extração e limpeza de dados em Python, SQL e MongoDB.
GCP Python SQL MongoDB Looker Studio - mar. de 2022 — jan. de 2023
Analista de Dados · Secretaria Estadual de Educação do ES
Espírito Santo · BrasilSuporte a decisões baseadas em dados para políticas educacionais públicas no Espírito Santo.
- Análise de dados e relatórios estratégicos sobre escolas indígenas, quilombolas e rurais para subsidiar decisões de política educacional.
- Produção de materiais educativos e condução de treinamentos sobre práticas de dados para equipes escolares.
Power BI Python SQL Excel - mar. de 2018 — nov. de 2022
Pesquisador / Analista de Dados · UFES — Universidade Federal do Espírito Santo
Vitória, ES · BrasilPesquisa de mestrado e doutorado com foco em análise histórica de dados e modelagem de redes sociais.
- ETL em documentos históricos e construção de pipelines de dados com Python.
- Análise de redes sociais (Twitter) via integração com API usando Python.
- Visualizações e dashboards em Power BI para comunicar resultados a stakeholders acadêmicos.
- Desenvolvimento do site www.jornaisdaindependencia.com.br.
Python R Power BI SQL Excel
Ferramentas & tecnologias
Engenharia de Dados
SQL & Spark
Qualidade & Governança
IA & Agentes
Certificações
✓ Databricks Certified Data Engineer Professional
Databricks Verificar
✓ Databricks Certified Data Engineer Associate
Databricks Verificar
✓ Apache Spark Developer
Databricks Verificar
✓ Databricks Certified Data Analyst Associate
Databricks Verificar
✓ DP-750: Microsoft Fabric Analytics Engineer
Microsoft Verificar
✓ DP-700: Microsoft Fabric Data Engineer
Microsoft Verificar
✓ DP-900: Azure Data Fundamentals
Microsoft Verificar
✓ AZ-900: Azure Fundamentals
Microsoft VerificarAI-900: Microsoft Azure AI Fundamentals
Microsoft VerificarGCP Associate Cloud Engineer
Google VerificarApache Airflow
Astronomer VerificarMongoDB for SQL Professionals
MongoDBGoogle Data Analytics
Google / Coursera VerificarGoogle Project Management
Google / Coursera VerificarPalestras & eventos
IA e Qualidade de Dados no Databricks: construindo testes usando DQX e IA
Trilha Data Platform. Por que qualidade de dados importa mais do que nunca na era da IA, e como construir testes no Databricks com DQX e DQX Forge — de regras escritas à mão a regras geradas por IA, contratos de dados, métricas e quarentena.
IA e Qualidade de Dados no Databricks
Fundamentos de qualidade de dados (DAMA-DMBOK, contratos de dados, data quality vs. observability) e, na prática, testes no Databricks com DQX e o DQX Forge, com geração de regras assistida por IA e demo ao vivo.
Acelerando a carreira em Engenharia de Dados com o Microsoft Learn Student Ambassadors
Com Edilson Santos. Como funciona o programa Microsoft Student Ambassadors, como entrar e evoluir nele, e como usar os benefícios (créditos Azure, certificações e comunidade) para construir portfólio e acelerar a carreira em dados — com demo na Azure.
Criando um processo de qualidade no Databricks com IA
Como estruturar um processo de qualidade de dados no Databricks: planejamento em 5 etapas, métricas, anti-patterns e testes com DQX e DQX Forge, usando IA para gerar regras a partir de profiling e contratos de dados.
Qualidade de Dados no Databricks
Frameworks de qualidade de dados, contratos de dados, métricas e anti-patterns — ISO-25012 e DAMA DMBOK aplicados na arquitetura medallion.
Arquiteturas modernas de dados: Snowflake, Databricks e um pouco de IA
Comparativo entre arquiteturas modernas de dados — Snowflake e Databricks — e como a IA está transformando a forma de construir e operar plataformas de dados.