Skip to main content
CI&T

[Job - 31147] Senior Data Developer (Azure e Databricks), Brazil

RemoteBrazil only
Published
Role
Data Engineering
Experience
Senior
Company size
Enterprise
Salary not disclosed
Check eligibility

Open to BR only. Set where you work from to check your eligibility.

No BS summary

Desenvolvedor(a) de Dados sênior com forte experiência em Databricks, PySpark, Python e SQL para construir e manter pipelines de dados em Azure/ADLS. Experiência comprovada com Delta Lake / Lakehouse e rotinas financeiras (reconciliação, P&L, fechamento). Vaga no Brasil; presença obrigatória no escritório para residentes da Região Metropolitana de Campinas conforme política.

Core skills

DatabricksPySparkDelta Lake

Required skills

PythonSQLAzure Data Lake Storage (ADLS)Lakehouse architectureDatabricks notebooksDatabricks JobsDatabricks cluster management

Optional skills

Databricks WorkflowsDatabricks AppsStreamlitAI frameworks

Optional languages

English

What you'll do

  • Desenvolver e manter pipelines de dados utilizando Databricks, PySpark, Python e SQL para transformar dados financeiros brutos em conjuntos de dados confiáveis e curados, prontos para consumo analítico e de negócios.
  • Integrar novas fontes de dados ao ecossistema de dados existente, expandindo as capacidades da plataforma e melhorando a visibilidade do negócio em todas as operações financeiras.
  • Apoiar atividades de reconciliação de dados financeiros, rotinas de P&L e processos de fechamento global, garantindo a consistência, precisão e rastreabilidade dos dados entre múltiplas fontes.
  • Processar e otimizar grandes volumes de dados estruturados e semi-estruturados aplicando as melhores práticas de Delta Lake e arquitetura Lakehouse, incluindo tabelas Delta, processamento incremental, otimização de formato de armazenamento e ajuste de desempenho de consultas.
  • Monitorar, solucionar problemas e dar suporte aos pipelines existentes, investigando discrepâncias, identificando causas raízes e garantindo um processamento diário e mensal confiável em ambiente de produção.
  • Propor e implementar melhorias contínuas no desempenho de dados, escalabilidade, manutenibilidade e qualidade dos dados em todo o ecossistema de dados financeiros.
  • Colaborar estreitamente com equipes multidisciplinares, incluindo profissionais de dados, stakeholders de negócios, equipes financeiras e de tecnologia, para compreender necessidades e entregar soluções de dados de alta qualidade.
  • Suportar práticas de governança e qualidade de dados aplicando regras de validação, mantendo auditabilidade, produzindo documentação e aplicando controles de dados para garantir dados financeiros confiáveis e bem geridos.
  • Contribuir para iniciativas orientadas a IA, ajudando a integrar modelos de IA e capacidades avançadas de dados aos fluxos de trabalho existentes, promovendo automação e processamento inteligente de dados.

What they require

  • Sólida experiência com Databricks, incluindo notebooks, jobs, workflows, gerenciamento de clusters e melhores práticas para construção de soluções de dados escaláveis
  • Forte domínio em processamento de dados utilizando PySpark, Python e SQL, com experiência demonstrada na transformação de dados brutos em conjuntos de dados curados e confiáveis
  • Experiência prática com Delta Lake e arquitetura Lakehouse, incluindo tabelas Delta, processamento incremental, otimização de dados e camadas de dados estruturadas
  • Conhecimento do ecossistema de dados Azure, especialmente Azure Data Lake Storage (ADLS), padrões de integração de dados em nuvem e processamento de dados em nuvem
  • Experiência no suporte a pipelines de dados financeiros, preferencialmente envolvendo reconciliação, P&L, fechamento financeiro ou outros processos críticos de negócios na indústria de serviços financeiros ou pagamentos
  • Capacidade comprovada para manter e melhorar pipelines existentes em ambientes de produção, incluindo solução de problemas, ajuste de desempenho, documentação e suporte em produção
  • Forte orientação para resolução de problemas, com habilidade para investigar questões complexas de dados, compreender causas raízes e propor soluções práticas em ambientes de dados desafiadores

Benefits

  • Plano de saúde e odontológico
  • Vale alimentação e refeição
  • Auxílio-creche
  • Licença parental estendida
  • Parceria com academias e profissionais de saúde e bem-estar via Wellhub (Gympass)  TotalPass
  • Participação nos Lucros e Resultados (PLR)
  • Seguro de Vida
  • Plataforma de aprendizagem contínua (CI&T University)
  • Clube de descontos
  • Plataforma online gratuita dedicada à promoção da saúde física, mental e bem-estar
  • Curso gestante e parentalidade responsável
  • Parceria com plataformas de cursos online
  • Plataforma para aprendizagem de idiomas
  • E muitos outros

At CI&T, we help large enterprises transform the potential of AI into real business impact with AI Deployment, AI-native execution, and tech-integrated business solutions. With 30 years of experience in technological transformation, we accelerate innovation with expertise in Agentic SDLC, Application modernization, Data & AI, Martech and Business strategy.

🇧🇷 BrazilTechnology ConsultingEnterpriseciandt.com/us-en

What people say about this company

3.5/ 5

Salary not disclosed