Sr data engineer gcp

Muito prazer, somos a Zallpy! Somos muito mais que uma empresa de tecnologia; somos uma comunidade diversa, plural e talentosa. Nosso propósito é liderar a transformação digital, com excelência e agilidade, promovendo crescimento mútuo e genuíno em relações éticas e duradouras. O que você vai fazer: Desenvolver e manter pipelines de dados estruturados e desestruturados, aplicando as melhores práticas de ETL/ELT. Mapear tabelas raw no SAP e automatizar processos de ingestão de dados no GCP. Realizar modelagem dimensional para otimizar o armazenamento e a recuperação de dados. Trabalhar com feature engineering, criando variáveis relevantes e significativas para análises avançadas. Gerenciar bancos de dados relacionais e chave-valor, garantindo eficiência e escalabilidade. Construir data pipelines para coleta, transformação e carga de dados provenientes de APIs e sistemas externos. Lidar com filas e streaming para o processamento de dados em tempo real. Desenvolver soluções de engenharia de dados em Python, Java ou Scala. Trabalhar com arquitetura de Data Plataforma, Data Warehouse e Data Lake. Implementar e manter bancos de dados SQL e NoSQL em plataformas de nuvem como GCP e AWS. Utilizar ferramentas de ETL/ELT para automatizar processos de ingestão e transformação. Implementar práticas de DataOps para melhorar a eficiência dos pipelines de dados e permitir self-service analytics. O que estamos buscando: Habilidades de comunicação oral e escrita em inglês. Formação superior ou pós-graduação em Matemática, Estatística, Tecnologia da Informação ou áreas correlatas. Sólida experiência com GCP (BigQuery, Cloud Storage, Cloud Functions). Modelagem dimensional para otimizar o armazenamento de informações. Feature engineering e criação de variáveis relevantes. Gerenciamento de bancos de dados relacionais e chave-valor. Construção de data pipelines para coleta, transformação e carga de dados. Extração de dados de APIs e integração com sistemas externos. Manipulação de filas e streaming para processamento em tempo real. Ferramentas de ETL/ELT e automação de pipelines de dados. Desenvolvimento em linguagens como Python, Java e Scala. Arquitetura de Data Plataforma, Data Warehouse e Data Lake. Bancos de dados SQL e NoSQL, para manipulação e transformação de dados. Ferramentas de versionamento para controle de código. Práticas de DataOps para otimização de ETL e habilitação de self-service analytics. Conhecimento em LGPD e melhores práticas de proteção de dados. Onde você vai trabalhar: Esta é uma posição para atuação 100% remota. Modalidade de contratação: CLT; Cooperado; PJ. O que oferecemos: Vale Alimentação/Refeição: Utilizamos o cartão multibenefício EVA, em formato crédito, para proporcionar flexibilidade nas suas compras diárias. Plano de Saúde Unimed: Sem coparticipação ou carência para o titular. Dependentes como filhos, cônjuges ou enteados podem ser incluídos com coparticipação. Plano de Saúde Bradesco: Sem coparticipação tanto para titular quanto dependentes. Plano Odontológico Uniodonto e Bradesco Dental: Ambos com a possibilidade de inclusão de dependentes, com descontos mínimos por pessoa. TotalPass: Para cuidar da sua saúde física com acesso a academias e modalidades esportivas. Zenklub: Cuide da sua saúde mental com duas consultas gratuitas por mês e valores acessíveis para consultas adicionais. Programa de Indicação: Indique talentos para se juntarem à Zallpy e receba bônus entre R$2.500 e R$5.000! Seguro de Vida: Garantia de proteção para você e sua família. Auxílio Creche: Apoio financeiro para colaboradores com filhos(as) de 4 meses até 6 anos que recebem até três pisos salariais da categoria. Baby Zallpy: Celebração especial para os novos bebês de Zallpers! Comunidades Voluntárias: Incentivamos a participação em três comunidades internas: Diversidade, Equidade & Inclusão, Esporte & Movimento, e Tecnologia. Descontos em Instituições de Ensino: Acesso a benefícios em Graduação, Pós-graduação, cursos livres e ensino de línguas por meio de convênios. Experiências e Desenvolvimento: Oportunidade de participar de viagens, workshops, eventos e atividades de Team Building. Acompanhamento de BP: Receba suporte e acompanhamento personalizado da nossa área de Business Partners. Benefícios válidos para modalidade CLT. Seja na sua vida pessoal ou profissional, a Zallpy se preocupa com seu crescimento e bem-estar! Venha fazer parte dessa jornada com a gente!#J-18808-Ljbffr