Vaga de Confeiteiro

Descrição: requisitos:experiência com ferramentas: microsoft fabric, databricks e apache em python para etl (pandas, spark).experiência com formatos de armazenamento como delta e parquet, além de conceitos de particionamento e fabric (workspaces, pipelines, lakehouses, notebooks, sparkjobs).Conhecimento em power bi ou palantir foundry será considerado um de dados: experiência no tratamento de dados estruturados, semiestruturados e não de dados: familiaridade com catálogos de dados, ciclo de vida e testes de em tecnologia da informação ou áreas correlatas, com especialização, mestrado ou doutorado sendo um diferencial. Desejável:experiência com apache airflow, kafka e rabbitmq para controle de fluxos e avançados em sqlapoiar na criação e manutenção de pipelines de etl para a extração, transformação e carga de da gestão da arquitetura de dados e evolução dos projetos de datalake e melhorias contínuas na arquitetura de dados e na qualidade da na criação, análise e validação de artefatos relacionados a bases de redundâncias e garantir a integridade e qualidade dos ativamente na migração de dados (mesmo entre sgbds diferentes).Validar manuais de implantação e scripts na criação de modelos de dados utilizando modelos estrela e práticas de criação de dimensões e fatos.