Do it all with Luxury Presence. Build your brand, expand your network, & close more deals.
Senior Data Engineer
Location
Canada
Posted
53 days ago
Salary
0
Seniority
Senior
Job Description
Senior Data Engineer
Luxury Presence
• Build and scale high-throughput streaming pipelines. Design, implement, and operate pipelines ingesting 400M+ monthly MLS updates across 350+ integrations using Airflow, Spark Streaming, Kafka, and Iceberg—ensuring reliability, performance, and data correctness. • Model and deliver high-quality, production-grade real estate datasets. Develop and maintain datasets that power core product experiences, with a focus on data modeling, transformation logic, and balancing freshness, accuracy, and cost. • Strengthen data quality and observability. Implement and improve data quality checks, monitoring, and alerting to detect issues early and reduce downstream impact. • Leverage AI to improve data operations. Contribute to AI-driven tooling that helps triage, debug, and resolve data quality issues, increasing team efficiency and reducing manual intervention.
Job Requirements
- 6+ years of professional data engineering or software engineering experience
- Strong experience with distributed data processing and streaming systems (Spark / PySpark, Kafka)
- Proficiency in Python (Pydantic preferred) and familiarity with Node/TypeScript is a plus
- Experience building and maintaining data pipelines on AWS using tools like Airflow, Spark Streaming, and Iceberg
- Solid understanding of data modeling and working with large-scale datasets
- Familiarity with event-driven systems and ingestion patterns (Kafka, SQS)
- Experience implementing data quality checks, monitoring, and debugging data issues
- Interest in applying AI/ML or automation to improve data workflows is a plus
- Proven track record leading high-impact initiatives from concept through production in a SaaS environment
- Expert-level grasp of software design principles and experience with multi-tenant platform architectures
Benefits
- Equal Opportunity Employer. All qualified applicants will receive consideration for employment without regard to race, color, religion, sex, sexual orientation, gender identity, or national origin.
Related Guides
Related Categories
Related Job Pages
More Data Engineer Jobs
Senior Data Engineer
Luxury PresenceDo it all with Luxury Presence. Build your brand, expand your network, & close more deals.
• Build and scale high-throughput streaming pipelines. Design, implement, and operate pipelines ingesting 400M+ monthly MLS updates across 350+ integrations using Airflow, Spark Streaming, Kafka, and Iceberg—ensuring reliability, performance, and data correctness. • Model and deliver high-quality, production-grade real estate datasets. Develop and maintain datasets that power core product experiences, with a focus on data modeling, transformation logic, and balancing freshness, accuracy, and cost. • Strengthen data quality and observability. Implement and improve data quality checks, monitoring, and alerting to detect issues early and reduce downstream impact. • Leverage AI to improve data operations. Contribute to AI-driven tooling that helps triage, debug, and resolve data quality issues, increasing team efficiency and reducing manual intervention.
• develop scalable data architectures and take responsibility for business-critical pipelines • actively shape how data is used across the company • design, implement, and optimize high-performance data pipelines • strategically evolve our data architecture and ensure scalability and maintainability • act as an interface and work closely with business units and other affiliated companies • take technical ownership of our data landscape • evaluate and selectively implement new technologies
Junior Data Engineer
Tech6 GroupA Tech6 Group é uma empresa focada em soluções tecnológicas e inovação, conectando talentos a projetos desafiadores e de alto impacto, sempre com um olhar humano, colaborativo e voltado ao crescimento contínuo.
Role Description Sua principal missão será atuar na construção, transformação e organização de dados em diferentes camadas analíticas (Bronze, Silver e principalmente Gold), garantindo qualidade, consistência e disponibilidade das informações para consumo por times de BI e áreas de negócio. - Desenvolver e manter pipelines de ingestão e transformação de dados no Databricks - Estruturar e evoluir as camadas Bronze, Silver e Gold - Garantir qualidade, consistência e confiabilidade dos dados - Realizar tratamento, limpeza e padronização de dados - Apoiar na modelagem de dados para consumo analítico (dashboards e relatórios) - Monitorar execuções e atuar na correção de falhas em pipelines - Trabalhar em conjunto com times de BI e áreas de negócio - Documentar processos e fluxos de dados Qualifications - Conhecimento básico/intermediário em Python (pandas ou PySpark) - Experiência ou familiaridade com Databricks - Conhecimento em Spark (PySpark) - Conhecimento em SQL - Noções de modelagem de dados (dimensional ou relacional) - Entendimento básico de arquitetura de dados (Data Lake / Data Warehouse) - Experiência com manipulação de arquivos (CSV, JSON, Parquet) - Familiaridade com ambientes cloud (AWS, Azure ou GCP) Requirements - Experiência prévia com Databricks em ambiente produtivo - Conhecimento em Delta Lake - Experiência com ferramentas de orquestração (Airflow, etc.) - Conhecimento em Power BI ou outras ferramentas de visualização - Certificações em cloud (AWS, Azure ou GCP) - Experiência com versionamento de código (Git) - Noções de engenharia de dados moderna (medallion architecture, data quality, etc.) Benefits - Proatividade para aprender e evoluir tecnicamente - Capacidade analítica para resolução de problemas - Boa comunicação com áreas técnicas e de negócio - Organização e atenção a detalhes (dados “quase certos” ainda estão errados 😄) - Colaboração e trabalho em equipe - Curiosidade para entender o contexto dos dados Company Description A Tech6 Group é uma empresa focada em soluções tecnológicas e inovação, conectando talentos a projetos desafiadores e de alto impacto, sempre com um olhar humano, colaborativo e voltado ao crescimento contínuo.
En Flux IT diseñamos tecnología para empresas que quieren crecer, y lo hacemos desde una comunidad que se impulsa a mejorar cada día más. Somos más de 300 fluxers que hacemos equipo para acompañar la evolución digital de distintas industrias, como la bancaria, aseguradora, de salud y logística, desde Argentina, al resto de LATAM, EE. UU. e incluso Europa. Estamos buscando Data Engineers Sr. que quieran formar parte de nuestra #FluxITfam. ¿Te sumás? Tu modalidad de trabajo: - Full time. - 100% remoto, con oficinas a disposición en La Plata y Puerto Madero. Qué esperamos de vos: - Más de 4 años de experiencia trabajando en posiciones similares. - Experiencia sólida en Python, para la extracción y transformación de datos, y automatizaciones. - Conocimientos sólidos de SQL, para el diseño de tablas, consultas complejas y optimización (mejora de performance, análisis de planes de ejecución). - Conocimientos en bases de datos no relacionales (Mongo DB es un plus!). - Sólidos conocimientos en consumo de datos usando APIs REST. - Experiencia en Databricks. - Experiencia en la nube de Azure. - Experiencia en la nube de AWS, en particular con Redshift. Qué valoramos: - Estudiantes avanzados o egresados en Sistemas o carreras afines a datos. En Flux IT, tenemos un set de beneficios completísimo para acompañarte en tu día a día. Conocé algunos de los más valorados por nuestra comunidad: 🥳Días off: Disfrutá de 5 días de descanso extra al año para recargar energías. 🌴 Vacaciones flex: Customizá tus días libres para disfrutarlos de la manera que mejor se adapte a tus planes! 🎂 Día off de cumpleaños: Elegí qué día tomarte libre dentro del mes de tu cumple y disfrutalo de la manera que más te guste. 🛩️ Work from anywhere: Trabajá desde cualquier parte del mundo mientras explorás, viajás y seguís desarrollando tu carrera. 🍟 Fluxers a la mesa: Disfrutá de ser fluxer y volvé tus almuerzos más livianos con este beneficio ;) 💻 Crédito conectividad: Bancamos tus gastos de internet para que puedas trabajar desde la comodidad de tu casa. Y muuuuchos más! Entrá a www.fluxitsoft.com/cultura/ para conocer nuestra Flux IT Box completa. El bonus track? Somos el puesto #2 en Los Mejores Lugares para Trabajar en Tecnología según el ranking Great Place to Work® Argentina 🤩 ¿Qué esperás para llevar una vida fluxer?

