Engenheiro de Dados

Somos a Credsystem. E há mais de 20 anos, criamos oportunidades para você conquistar cada vez mais. Lado a lado com quem faz o varejo acontecer todos os dias, nos tornamos especialistas em seu negócio.Cultivamos relações e abrimos caminhos para o sucesso. Tudo pra você se aproximar do seu cliente. De um jeito descomplicado, aberto e real.Estamos inovando sempre para buscar diferentes soluções e oferecer novas possibilidades para o varejo. Com agilidade, tecnologia e renovação, por dentro e por fora.Quem disse que não dá pra resolver simples pensando grande? Inovar trabalhando com o que a gente já sabe? Crescer no futuro valorizando o presente?Vem tornar novas conquistas possíveis com a gente!Responsabilidades e atribuiçõesE o seu dia a dia como será? 💼Buscamos um profissional sênior em engenharia de dados com implantação de projetos complexos utilizando Databricks.Principais Responsabilidades e Escopo:Desenvolvimento de Pipelines de Dados: Criar e manter processos ETL (Extração, Transformação e Carga) para mover dados de fontes diversas para armazéns de dados (Data Warehouses/Data Lakes).Infraestrutura e Banco de dados: Projetar e implementar bancos de dados escaláveis (relacionais e NoSQL), garantindo segurança, desempenho e a integridade da informação.Big Data e Processamento Distribuído: Gerenciar grandes volumes de dados utilizando ferramentas de processamento distribuído, essencial para empresas com alto volume de informações.Cloud Computing e Automação: Implementar soluções na nuvem (AWS, Azure, GCP) e automatizar fluxos de trabalho (IaC/DevOps).Colaboração e Estruturação: Atuar com equipes de análise para entender necessidades de negócio, garantindo que os dados estejam prontos para dashboards e modelos de IA.Requisitos e qualificaçõesO que esperamos de você? 🎓Alta proficiência em Spark, Delta Tables, Python, SQL e Git, com experiência sólida em Databricks.Certificação Databricks Professional, conhecimento em DABs, DLT, Spark Structured Streaming, Delta Sharing e MLFlow, experiência com configuração de agentes usando LangChain ou frameworks similares em Python, além de vivência no setor financeiro.Informações adicionaisEmpresa localizada no Alphaville - BarueriModelo Remoto Estamos sempre focados em proporcionar a melhor experiência para os nossos Credsysters:Conheça um pouco mais:🍕 Vale-refeição e alimentação.🩺 Assistência Médica (para você e seus dependentes).🦷 Assistência Odontológica (para você e seus dependentes).🧠 Duas consultas mensais com psicólogo (sem nenhuma cobrança).🥗 Consulta com nutricionista (por conta da Credsystem).🏋️‍♀️ Gympass (para você cuidar da sua saúde e bem-estar).💪 Momento bem-estar (sessões semanais de massagem para você manter seu corpo relaxado).😊 Seguro de Vida.🎁 Remuneração variável, de acordo com seu cargo e atingimento de metas.🚀 Desconto em universidades (para ir mais longe na sua carreira).🌍 Parceria em escola de idioma (para você desenvolver e aprimorar uma segunda língua).🎉Day-off de Aniversário.💰Empréstimo Consignado.🚋Vale-Transporte, Fretado ou Estacionamento.👪Auxílio Creche.🏊‍♀️Sesc.