Ficha de decisão
- Formação
- Não identificada no texto disponívelOrigem do dado: Não disponível na base
- Experiência
- Citada, sem indicar se é obrigatóriaOrigem do dado: Inferido
Ver trecho de Experiência
Experiência sólida e avançada em projetos produtivos com Databricks
Origem: Requisitos do anúncio
- Idioma
- Leitura automática de idiomas ainda não publicada; confira a descriçãoOrigem do dado: Não disponível na base
- Jornada
- Não identificada no texto disponívelOrigem do dado: Não disponível na base
- Vínculo
- CLTOrigem do dado: Normalizado pelo Tech Jobs
- Modalidade e local
- Remoto. Local: BrasilOrigem do dado: Normalizado pelo Tech Jobs
Ver trecho de Modalidade e local
Remoto
Origem: Cabeçalho da vaga
- Remuneração
- Sem valor na vaga. Referência de mercado para Sênior em DadosOrigem do dado: Inferido
- Nível
- SêniorOrigem do dado: Normalizado pelo Tech Jobs
Tecnologias
Diferencial
- AWS
- Dados
Citadas no anúncio
- Python
- SQL
- Git
- Salesforce
O que você vai fazer
- Atuar no desenvolvimento, implementação e evolução de soluções de Engenharia de Dados utilizando o ecossistema Databricks
- Definir e implementar arquiteturas de dados escaláveis, baseadas no modelo Lakehouse e na arquitetura Medallion (Bronze, Silver e Gold)
- Desenvolver, otimizar e manter pipelines de dados utilizando Databricks, PySpark, Spark SQL e Delta Lake
Benefícios
- Benefícios
- Vale-alimentação e/ou vale-refeição
- Plano de saúde e plano odontológico
Sobre a oportunidade
.Responsabilidades e atribuições
- Atuar no desenvolvimento, implementação e evolução de soluções de Engenharia de Dados utilizando o ecossistema Databricks
- Definir e implementar arquiteturas de dados escaláveis, baseadas no modelo Lakehouse e na arquitetura Medallion (Bronze, Silver e Gold)
- Desenvolver, otimizar e manter pipelines de dados utilizando Databricks, PySpark, Spark SQL e Delta Lake
- Implementar soluções de ingestão, processamento e integração de dados, incluindo CDC e Structured Streaming
- Atuar na orquestração de pipelines e integração de sistemas por meio do Azure Data Factory (ADF)
- Desenvolver APIs REST, microsserviços e automações utilizando Python
- Garantir a governança, segurança, linhagem e controle de acesso aos dados
- Realizar otimizações de performance, escalabilidade e custos de processamento
- Atuar na observabilidade, monitoramento e sustentação de pipelines em produção
- Ser referência técnica para o time, orientando profissionais e estabelecendo boas práticas de Engenharia de Dados.
Responsabilidades
- Atuar no desenvolvimento, implementação e evolução de soluções de Engenharia de Dados utilizando o ecossistema Databricks
- Definir e implementar arquiteturas de dados escaláveis, baseadas no modelo Lakehouse e na arquitetura Medallion (Bronze, Silver e Gold)
- Desenvolver, otimizar e manter pipelines de dados utilizando Databricks, PySpark, Spark SQL e Delta Lake
- Implementar soluções de ingestão, processamento e integração de dados, incluindo CDC e Structured Streaming
- Atuar na orquestração de pipelines e integração de sistemas por meio do Azure Data Factory (ADF)
- Desenvolver APIs REST, microsserviços e automações utilizando Python
- Garantir a governança, segurança, linhagem e controle de acesso aos dados
- Realizar otimizações de performance, escalabilidade e custos de processamento
- Atuar na observabilidade, monitoramento e sustentação de pipelines em produção
- Ser referência técnica para o time, orientando profissionais e estabelecendo boas práticas de Engenharia de Dados.
Requisitos
- Experiência sólida e avançada em projetos produtivos com Databricks
- Domínio de PySpark, Spark SQL, Delta Lake e Apache Spark
- Experiência com DLT / Lakeflow Spark Declarative Pipelines, CDC e Structured Streaming
- Experiência com Liquid Clustering, Auto Loader e otimização de tabelas Delta
- Conhecimento avançado em Unity Catalog, governança, segurança, linhagem e controle de acesso
- Experiência na definição de arquiteturas de dados, modelo Lakehouse e arquitetura Medallion
- Experiência com Azure Data Factory (ADF) para orquestração, ingestão e integração de dados
- Domínio de Python para desenvolvimento de APIs REST, microsserviços e automações
- Experiência com Spark Performance Tuning, Photon, particionamento, shuffle e análise de planos de execução
- Conhecimento em Databricks Workflows, CI/CD, Git e Declarative Automation Bundles
- Experiência com otimização de workloads, dimensionamento de recursos computacionais e redução de custos
- Vivência com observabilidade, monitoramento e sustentação de pipelines em produção
- Autonomia na resolução de problemas técnicos complexos e capacidade de tomada de decisão arquitetural
- Experiência como referência técnica, apoiando e orientando outros profissionais.Certificações: Obrigatória: Databricks Certified Data Engineer Associate. Fortemente desejável: Databricks Certified Data Engineer Professional. Diferencial: Databricks Certified Associate Developer for Apache Spark.Desejável: certificações AWS, Azure ou GCP relacionadas à Engenharia de Dados e Arquitetura de Soluções.
Benefícios
Vale-alimentação e/ou vale-refeição; Plano de saúde e plano odontológico; Plano de saúde para o seu pet; Auxílio home office (para vagas remotas); Kit de boas-vindas no onboarding; Seguro de vida; Zenklub, com acompanhamento psicológico e nutricional; TotalPass; Programa de Certificações e Capacitação Contínua com parceiros (Adobe, Anthropic, AWS, Google, Microsoft, Salesforce); Parcerias e descontos para o seu desenvolvimento; Acesso ao conteúdo UOL; Kit maternidade; Licença maternidade e paternidade estendidas; Programa de indicações.
Informações adicionais
- BenefíciosVale-alimentação e/ou vale-refeição
- Plano de saúde e plano odontológico
- Plano de saúde para o seu pet
- Auxílio home office (para vagas remotas)
- Kit de boas-vindas no onboarding
- Seguro de vida
- Zenklub, com acompanhamento psicológico e nutricional
- TotalPass
- Programa de Certificações e Capacitação Contínua com parceiros (Adobe, Anthropic, AWS, Google, Microsoft, Salesforce)
- Parcerias e descontos para o seu desenvolvimento
- Acesso ao conteúdo UOL
- Kit maternidade
- Licença maternidade e paternidade estendidas
- Programa de indicações.
Tecnologias
- Python
- AWS
- SQL
- Dados
- Git
- Salesforce
Contexto Tech Jobs
Pontos a confirmar
A vaga remota aceita candidatos de qualquer estado?
Sem trecho do anúncio para consultar neste ponto.
Candidatura
Acessar oportunidade
Abre em nova aba, fora do Tech Jobs.
Reportar problema
Escolha o motivo para abrir um e-mail já preenchido com o título e o link desta vaga. Nada é enviado até você enviar a mensagem.
A Tech Jobs não cobra para participar de processos seletivos. Desconfie de solicitações de pagamento ou dados sensíveis.