Buscamos um(a) Engenheiro(a) de Dados Sênior com experiência em Python e Google Cloud Platform para atuar na evolução da plataforma de dados de uma empresa referência em SaaS para reforma tributária, construindo pipelines confiáveis e escaláveis, integrando diferentes fontes em um data lake e garantindo a qualidade, o monitoramento e a performance de toda a cadeia de dados. Você trabalhará de perto com times de engenharia e de negócio para transformar novos requisitos em soluções de dados robustas.
O que você fará no dia a dia
Projetar, construir e evoluir pipelines de dados, modelos de dados e arquitetura para atender novos requisitos de engenharia e de negócio
Implementar rotinas de ETL para migração, tratamento e armazenamento de dados
Desenvolver integrações entre diferentes fontes (bancos relacionais, APIs externas e outras) para centralizar os dados em um data lake
Implementar sistemas e rotinas de monitoramento de dados, aplicações e queries
Acompanhar a execução dos pipelines, garantindo estabilidade e atuando rapidamente em falhas
Planejar e conduzir testes de carga para validar performance e escalabilidade
Aplicar boas práticas de integração contínua e deploy em cloud
Experiência sólida em Python para engenharia de dados
Experiência com Google Cloud Platform (GCP) e conhecimento dos recursos de plataformas cloud
Experiência com integração contínua e deploy em cloud
Experiência com data lake, data warehouse e data marts
Conhecimento em bancos de dados SQL e NoSQL
Conhecimento em arquitetura orientada a eventos
Diferenciais
Vivência em projetos de streaming de dados
Experiência com Apache Airflow para orquestração de pipelines
Experiência com processamento distribuído de dados (Spark ou similares)
Conhecimento em serviços de dados do GCP (BigQuery, Dataflow, Pub/Sub, Cloud Composer)
20 dias de descanso remunerado ao ano
Totalpass
Workshops e treinamentos com parceiros