Arquiteto Dados Sênior
تفاصيل الوظيفة
Responsabilidades: Desenhar e desenvolver pipelines e motores de dados que sejam reaproveitáveis e performáticos, com visão de escalabilidade e otimização de custos na nuvem. Trabalhar próximo(a) a diferentes stakeholders para entender requisitos de negócio e traduzi-los em soluções técnicas robustas. Lidar com a integração de diferentes fontes de dados (estruturadas ou não, APIs e data lake). Ser uma referência técnica para o time, contribuindo para o desenvolvimento de toda a equipe. Garantir a integridade, segurança e qualidade dos dados. Garantir que as soluções estejam de acordo com as melhores práticas e padrões, automatizando atividades e implementando mecanismos de monitoração ao longo de toda a pipeline de dados. Ter e promover a cultura SRE. Requisitos Técnicos: Experiência com desenvolvimento na nuvem (Azure e/ou AWS), com conhecimento de práticas para otimização de custos. Vasta experiência em engenharia de dados e data lake, com foco na construção de pipelines de dados escaláveis utilizando Databricks e Spark. Excelentes noções de arquitetura e system design, sabendo lidar com grandes volumes de dados em batch e real time. Conhecimento avançado em ferramentas de dados como o Azure Data Factory (ou equivalentes) e Azure Event Hubs (ou equivalentes). Experiência com bancos de dados relacionais e bancos de dados NoSQL. Experiência com ferramentas de DevOps, CI/CD. Conhecimento avançado em Java e/ou Scala para pipelines de manipulação de dados. Conhecimento profundo de SQL. Conhecimento em testes unitários e automatizados. Experiência de implantação de mecanismos de observabilidade de dados. Diferenciais: Conhecimento de práticas e ferramentas do BI tradicional Conhecimentos em Dynatrace, Splunk, ELK, Grafana, OpenTelemetry Conhecimentos de Backend Java
Apply safely
To stay safe in your job search, information on common scams and to get free expert advice, we recommend that you visit SAFERjobs, a non-profit, joint industry and law enforcement organization working to combat job scams.