Job Closed

This listing is no longer active.

ília logo
ília

Somos especialistas em tecnologia, dados e design, impulsionando a transformação digital de grandes players do mercado há mais de 10 anos, nos setores financeiro, seguros e mobilidade. Com mais de 450 profissionais, estamos presentes no Brasil e Europa, atendendo aos mercados da América Latina, Europa e América do Norte, desenvolvendo produtos digitais de alta qualidade e com foco em resultados de negócios. Certificada pelo 7° ano consecutivo como Great Place to work aqui na ília acreditamos que pessoas mudam o mundo, e investimos nelas. Nossas awesome deliveries são feitas de pessoas para pessoas, afinal awesome people make awesome deliveries!

Senior Data Engineer (Python / Microservices)

Data EngineerData EngineerFull TimeRemoteSeniorTeam 501-1,000

Location

Brazil

Posted

86 days ago

Salary

0

Seniority

Senior

Job Description

Senior Data Engineer (Python / Microservices)

ília

Role Description Esta oportunidade é para atuar em um time de alta performance. Buscamos um perfil híbrido que domine a Engenharia de Dados, mas que possua a "casca" de desenvolvimento de software. Diferente de posições tradicionais de dados, aqui você trabalhará diretamente com a integração entre pipelines e microsserviços, exigindo versatilidade para transitar entre diferentes stacks tecnológicas conforme o desafio do projeto. Responsabilidades: - Ingestão e Extração: Desenvolver scripts (Python puro ou PySpark) para consultar bases SQL Server, tratar os dados e publicá-los em buckets AWS S3. - Processamento (Arquitetura Medalhão): Construir pipelines para mover e refinar dados entre as camadas Bronze e Prata utilizando Python, PySpark e AWS Glue. - Disponibilização de Dados: Garantir a entrega de dados em OpenSearch (Fast Data) e no Amazon Redshift (para suporte ao time de BI). - Integração com Microsserviços: Colaborar com a camada de consumo, onde microsserviços em Node.js consultam o OpenSearch para servir as aplicações finais. - Visão Consultiva: Atuar de forma autônoma, indicando os melhores caminhos técnicos e arquiteturais para o projeto. Qualifications - Sólida vivência em projetos de engenharia de dados com autonomia para execução sem supervisão constante. - Domínio de Python e PySpark: Experiência avançada em processamento de dados e scripts de automação. - Software Engineering: Conhecimento profundo em Programação Orientada a Objetos (POO) e conceitos sólidos de Microsserviços. - Cloud AWS: Experiência prática com S3, Glue e Redshift. - Banco de Dados: Domínio de SQL para consultas e manipulações (SQL Server). - Mentalidade "Agnostic Stack": Flexibilidade e interesse em lidar com múltiplas linguagens e curvas de aprendizado (como baixar um projeto Node.js ou Java para testes e spikes). Requirements - Conhecimento prévio em Node.js. - Experiência com OpenSearch ou ferramentas similares de busca. - Experiência com AWS Glue utilizando Python. Benefits - Nossa contratação é CLT- 40h semanais com jornada flexível, sendo executada de forma remota. - Para Saúde e bem-estar: - Plano de Saúde e Odontológico SulAmérica extensivo a dependentes; - Vale Alimentação/Refeição em cartão flexível Caju benefícios; - Seguro de Vida; - Auxílio Home-Office em cartão flexível Caju benefícios; - Wellhub (Gympass); - Sesc – extensivo a dependentes, com acesso aos serviços em todo o Brasil; - TotalPass. - Para o seu Desenvolvimento: - ília University: Universidade Corporativa com mais de 20 mil cursos disponíveis para desenvolvimento pessoal e profissional; - Language Academy: Escola de idiomas para ílians; - í-talks e Chapter: Momentos e cerimônias em que o time compartilha práticas, estudos, projetos e ideias. Nas chapters ainda se reúnem pessoas com skills similares para compartilhamento de ideias, práticas e experiências; - Benefícios não convencionais: - Plano de Saúde PET - Guapeco; - Onhappy – benefício de viagem a lazer, com liberdade para você viajar com quem quiser; - BYOD - Alugamos o seu notebook pessoal te pagando um valor mensal para que você o use, mas disponibilizamos também máquinas de trabalho para ílians. Você quem decide! - Seu Niver, seu bolo! - Seu Networking Vale Prêmio - Programa de premiação a indicação de novos funcionários.

Related Categories

Related Job Pages

More Data Engineer Jobs

Lattice logo

Software Engineer, Data Platform

Lattice

Lattice is a people success platform that empowers leaders to build engaged, high-performing teams & winning cultures.

Data Engineer86 days ago
Full TimeRemoteTeam 501-1,000Since 2015H1B Sponsor

• Standardize Lattice’s data infrastructure and practices through establishing a simple, cohesive, and reliable platform that seamlessly integrates internal and partner data • Design, develop, and deploy scalable data pipelines that can ingest, process, and serve data across multiple teams for batch and streaming workloads. • Make data effortlessly accessible – abstract infrastructure complexity through reusable SDKs, libraries, and tooling • Shape data governance practices ensuring access to data is secure, compliant, and high-quality. • Partner with Engineering, Product, and business leaders to identify data needs and implement solutions that align with strategic objectives.

BC + 2 moreAll locations: BC | ON | Canada
$90K - $120K / year
Job Closed
Workana logo

Senior Foundry Engineer – Data Pipelines, Ontology

Workana

The largest platform for hiring top remote talent from Latin America.

Data Engineer86 days ago
ContractRemoteTeam 51-200Since 2012H1B No Sponsor

• Build, optimize, and maintain data pipelines into Palantir Foundry. • Integrate multiple healthcare data sources, including clinical, claims, supply chain, and other enterprise datasets. • Support rapid data onboarding to accelerate ontology development and population. • Design, build, and refine ontology objects, properties, relationships, and data mappings in Palantir Foundry. • Collaborate with business and technical stakeholders to translate requirements into scalable data and ontology structures. • Support ontology governance, versioning, and best practices. • Work across Pipeline Builder, Code Repositories, data integration workflows, and Foundry-based modeling efforts. • Contribute to a fast-moving implementation environment where rapid iteration and practical delivery are required.

Illinois + 1 moreAll locations: Illinois | Texas
Airbnb logo

Data Scientist, Platform

Airbnb

Airbnb is a community based on connection and belonging.

Data Engineer86 days ago
Full TimeRemoteTeam 5,001-10,000Since 2007H1B Sponsor

• Apply and develop causal inference methods to estimate the effectiveness of Airbnb’s marketing initiatives. • Conduct data pulls, analyze trends, and create new features to support measurement efforts. • Design and analyze experiments to evaluate the impact of marketing campaigns. • Work effectively with cross-functional teams, providing insights that optimize marketing strategies. • Lead the creation of internal white papers and contribute to Airbnb tech blog posts.

United States
$151K - $175K / year
Job Closed
Sur logo

Lead Data Engineer

Sur

***Only CV's submitted in English will be accepted.

Data Engineer86 days ago

Role Description As the Data Engineer you will be responsible for designing, building, and maintaining the data engineering function for a remote-first technology organization. This role oversees the full lifecycle of data architecture, pipelines, modeling, tooling, and reliability. It also involves operational duties and direct collaboration with technical leadership, including defining the complete data engineering strategy from the ground up. - Architect, implement, and maintain scalable data pipelines across core systems. - Build and manage analytics infrastructure using both open-source and commercial tools. - Ensure data quality and schema discipline for operational reliability. - Deliver clean, consistent models and dashboards utilized by multiple teams. - Collaborate with stakeholders to support analytics, business intelligence, and decision-making initiatives. Qualifications - 5+ years hands-on data engineering experience; big plus if you’ve been the first data hire before. - Strong SQL plus real programming ability (Python preferred). - Production experience with data tooling (Airflow, dbt, Fivetran). - Experience integrating APIs and working with warehouses/lakes such as Redshift, ClickHouse, or similar. - Experience with analytics/BI tools (Metabase, Looker, Tableau, PowerBI, etc.). - Comfortable with cloud infrastructure and IaC (AWS strongly preferred). - Soft skills to understand business needs and collaborate with non-tech teams on their use cases. - Embedded and real-time analytics experience is a plus. - Streaming architectures (Kinesis/Kafka), ClickHouse, ELK, VictoriaMetrics, reverse-ETL is a plus. Requirements - $5,000 - $7,000 USD/month - Unlimited PTO

Serbia
$5K - $7K / month
Job Closed