Pessoa Engenheira de Dados SR - Remoto - 2609
TypeFull-time job
LocationBrazil
Posted2 hours ago
A Softplan é uma das maiores empresas de software para o setor público da América Latina. Há 35 anos, desenvolvemos soluções que transformam a vida de milhões de pessoas, impactando aproximadamente 95% da população brasileira e expandindo nossa atuação também para Colômbia e Peru.
Nossas tecnologias impulsionam a transformação digital nos segmentos de Infraestrutura e Obras, Processos Digitais e Administrativos e Justiça, tornando os serviços públicos mais ágeis, transparentes e eficientes. Trabalhar aqui é fazer parte de uma empresa que une propósito, inovação e impacto social.
Atualmente, contamos com um portfólio de mais de 19 marcas e essa posição atuará no produto de Procuradorias de justiça, em uma vertical robusta, sendo a estrutura de Engenharia de Software uma sólida área. O produto está em mais de 140 procuradorias Estaduais e Municipaisdo país, com um planejamento de grande expansão até 2028 – gerando o desafio de controle, escalabilidade e estabilidade do produto.
Projetar e evoluir nosso Lakehouse na AWS sobre Delta Lake, definindo padrões de modelagem, particionamento e organização em camadas (bronze/silver/gold);
Construir e sustentar pipelines batch ponta a ponta com Spark/Databricks e DBT, orquestrados em Airflow;
Operar pipelines de streaming com Kafka, garantindo dados em tempo real para o produto;
Integrar o Lakehouse com plataformas de IA e análise, garantindo acesso otimizado para treinamento e inferência de modelos.
Atuar na construção e sustentação da plataforma de dados, mapeando dependências e sincronizando roadmaps.
Otimizar custos e desempenho de armazenamento e processamento em ambientes de nuvem.
Experiência comprovada em engenharia de dados ou arquitetura de dados, com foco em Data Lakes e Lakehouses.
Domínio de ferramentas e serviços de nuvem para dados (AWS S3, Glue, Athena, Lake Formation, Azure Data Lake, GCP Storage/BigQuery).
Conhecimento sólido em SQL avançado e programação em Python (preferencial) para automação e transformação de dados.
Experiência com processamento distribuído (Apache Spark, Databricks, Flink ou similar).
Entendimento de governança de dados, incluindo gestão de metadados, segurança e versionamento.
Responsabilidade ponta a ponta sobre pipelines em produção (confiabilidade, SLA, observabilidade);
Comunicação clara, autonomia e capacidade de conduzir decisões técnicas com PMs, engenheiros e lideranças.
O que será um diferencial:
Certificações em engenharia ou arquitetura de dados na nuvem (AWS, Azure, GCP).
Informações adicionais
Modelo de trabalho: Anywhere Office - 100% remoto
Benefícios:
Vale-alimentação/Vale-refeição;
Plano de saúde e odontológico;
Auxílio Home Office;
Participação nos Lucros e Resultados;
Voucher para Kit Setup;
Seguro de vida;
Day Off aniversário;
Programa de promoção à saúde e bem-estar;
Parcerias e descontos.
Um dos nossos pilares é a valorização das pessoas e temos orgulho de dizer que somos uma empresa que apoia a diversidade e inclusão. Sendo assim, consideramos todos os candidatos para as nossas vagas, sem distinção de raça, cor, religião, gênero e identidade de gênero, nacionalidade, deficiência, orientação sexual, ascendência, idade, etc.
Originally posted on Himalayas
Nossas tecnologias impulsionam a transformação digital nos segmentos de Infraestrutura e Obras, Processos Digitais e Administrativos e Justiça, tornando os serviços públicos mais ágeis, transparentes e eficientes. Trabalhar aqui é fazer parte de uma empresa que une propósito, inovação e impacto social.
Atualmente, contamos com um portfólio de mais de 19 marcas e essa posição atuará no produto de Procuradorias de justiça, em uma vertical robusta, sendo a estrutura de Engenharia de Software uma sólida área. O produto está em mais de 140 procuradorias Estaduais e Municipaisdo país, com um planejamento de grande expansão até 2028 – gerando o desafio de controle, escalabilidade e estabilidade do produto.
Projetar e evoluir nosso Lakehouse na AWS sobre Delta Lake, definindo padrões de modelagem, particionamento e organização em camadas (bronze/silver/gold);
Construir e sustentar pipelines batch ponta a ponta com Spark/Databricks e DBT, orquestrados em Airflow;
Operar pipelines de streaming com Kafka, garantindo dados em tempo real para o produto;
Integrar o Lakehouse com plataformas de IA e análise, garantindo acesso otimizado para treinamento e inferência de modelos.
Atuar na construção e sustentação da plataforma de dados, mapeando dependências e sincronizando roadmaps.
Otimizar custos e desempenho de armazenamento e processamento em ambientes de nuvem.
Experiência comprovada em engenharia de dados ou arquitetura de dados, com foco em Data Lakes e Lakehouses.
Domínio de ferramentas e serviços de nuvem para dados (AWS S3, Glue, Athena, Lake Formation, Azure Data Lake, GCP Storage/BigQuery).
Conhecimento sólido em SQL avançado e programação em Python (preferencial) para automação e transformação de dados.
Experiência com processamento distribuído (Apache Spark, Databricks, Flink ou similar).
Entendimento de governança de dados, incluindo gestão de metadados, segurança e versionamento.
Responsabilidade ponta a ponta sobre pipelines em produção (confiabilidade, SLA, observabilidade);
Comunicação clara, autonomia e capacidade de conduzir decisões técnicas com PMs, engenheiros e lideranças.
O que será um diferencial:
Certificações em engenharia ou arquitetura de dados na nuvem (AWS, Azure, GCP).
Informações adicionais
Modelo de trabalho: Anywhere Office - 100% remoto
Benefícios:
Vale-alimentação/Vale-refeição;
Plano de saúde e odontológico;
Auxílio Home Office;
Participação nos Lucros e Resultados;
Voucher para Kit Setup;
Seguro de vida;
Day Off aniversário;
Programa de promoção à saúde e bem-estar;
Parcerias e descontos.
Um dos nossos pilares é a valorização das pessoas e temos orgulho de dizer que somos uma empresa que apoia a diversidade e inclusão. Sendo assim, consideramos todos os candidatos para as nossas vagas, sem distinção de raça, cor, religião, gênero e identidade de gênero, nacionalidade, deficiência, orientação sexual, ascendência, idade, etc.
Originally posted on Himalayas
Apply on Himalayas →
Job sourced from Himalayas. Applications happen directly on the original platform — we never collect your data.