Skip to main content
Ciandt careers
Ciandt logo

[Job - 30560] Sênior Data Developer (Dabricks

CiandtBrazilHomeoffice3d ago
PythonAzureCI/CDGitHub ActionsMongoDBMachine LearningAIETLSparkKafkaSQLPR

Continue with your CV

PDF, Word, or image. Under 10MB.

Job description

Na CI&T , ajudamos grandes empresas a transformar o potencial da AI em impacto real nos negócios com AI Deployment, execução AI-native e tech-integrated business solutions.

Com 30 anos de experiência em transformação tecnológica, aceleramos inovação com expertise em agentic SDLC, application modernization, Data & AI, martech e business strategy.

Somos 8.000 CI&Ters em mais de 25 países, colaborando para construir soluções com impacto real. AI já faz parte da forma como trabalhamos, evoluímos e inovamos todos os dias.

Importante: se você reside na Região Metropolitana de Campinas, sua presença nos escritórios da cidade será obrigatória, conforme a política de frequencia vigente.

Estamos em busca de uma pessoa para atuar como Engenheiro(a) de Dados Sênior em um projeto estratégico. Você será responsável por construir e manter pipelines de dados, desenvolver rotinas de processamento em larga escala e apoiar a evolução da plataforma de dados, utilizando tecnologias modernas de processamento distribuído e ambientes cloud.

Responsabilidades:

-Projetar, desenvolver e manter pipelines de dados para:

-Ingestão de dados de múltiplas fontes.

-Processamento e transformação de dados em larga escala.

-Integração entre sistemas corporativos e plataformas analíticas.

-Disponibilização de dados para consumo por áreas de negócio e tecnologia.

-Desenvolvimento em Databricks e PySpark

-Atuar na construção e manutenção de soluções utilizando: Databricks,Python,PySpark,SQL.

-Garantir performance, qualidade e escalabilidade dos processos de dados.

-Realizar consultas, integrações e manipulação de dados em ambientes relacionais e não relacionais, incluindo: SQL, MongoDB.

-Participar da modelagem, tratamento e disponibilização das informações para diferentes consumidores de dados.

-Monitorar pipelines e processos de dados.

-Identificar e corrigir falhas operacionais.

-Implementar melhorias de performance.

-Apoiar a evolução da arquitetura e dos processos de engenharia de dados.

Requisitos Técnicos:

- Experiência sólida como Engenheiro(a) de Dados, Engenheiro(a) de Dados Sênior ou papel equivalente.

- Forte conhecimento em Python para engenharia de dados, automação, análise de dados e apoio a soluções de IA.

- Sólido conhecimento em SQL e exploração de dados estruturados.

- Sólido conhecimento em MongoDB.

- Experiência com Databricks, PySpark e Spark.

- Experiência na construção, otimização e sustentação de pipelines de dados escaláveis.

- Experiência em ambientes cloud, preferencialmente Azure Databricks.

- Experiência com processamento de dados em tempo quase real, preferencialmente com Kafka.

- Experiência com produtização de modelos de Machine Learning no Databricks e práticas de MLOps.

- Experiência com esteiras de CI/CD, especialmente GitHub e GitHub Actions.

- Domínio de boas práticas de engenharia de dados, versionamento, testes, revisão de código e qualidade de dados.

Diferenciais:

-MongoDB.

-Modelagem de Dados.

-Construção de pipelines ETL/ELT.

-Conceitos de Data Lake e processamento distribuído.

-Ambientes Cloud.

-Vivência em ambientes regulados.

-Experiência com uso de IA no desenvolvimento, como GitHub Copilot, prompt engineering e code review automatizado.

#LI-DR3