AVANTTi logo
AVANTTi

Agilidade | Senioridade | Transparência | Responsabilidade Social

Senior Data Engineer

Data EngineerData EngineerContractRemoteSeniorTeam 51-200H1B No SponsorCompany SiteLinkedIn

Location

Brazil

Posted

2 days ago

Salary

0

Seniority

Senior

PortugueseEnglishPySparkSQL

Job Description

Senior Data Engineer

AVANTTi

• Data ingestion for the Databricks environment. • Development and optimization of data pipelines using PySpark and SQL. • Integration with Microsoft Fabric for data management and governance. • Building semantic models in Power BI to support advanced analytics.

Job Requirements

  • Data ingestion for the Databricks environment.
  • Development and optimization of data pipelines using PySpark and SQL.
  • Integration with Microsoft Fabric for data management and governance.
  • Building semantic models in Power BI to support advanced analytics.
  • Fluent Portuguese.
  • Familiarity with technical English for reading documentation and collaborating on projects is desirable.

Benefits

  • Remote

Related Categories

Related Job Pages

More Data Engineer Jobs

Reply logo

Data & AI Engineer – Microsoft Fabric

Reply

Reply designs and implements innovative solutions in the areas: Digital Services, Technology and Consulting.

Data Engineer2 days ago
Full TimeRemoteTeam 10,001+Since 1996H1B Sponsor

• Looking for a Senior Data Engineer with deep expertise in Microsoft Fabric and AI integration. • Hands-on experience architecting and delivering end-to-end data solutions within the Microsoft Fabric ecosystem, including Data Factory, Lakehouse, Warehouses, Notebooks, and Real-Time Intelligence. • Comfortable working with large-scale data pipelines, semantic models, and AI-powered workflows using Azure OpenAI or similar tools.

Brazil
Payabli logo

Staff Data Engineer

Payabli

The next-generation payments infrastructure for software companies to quickly and easily embed and monetize payments.

Data Engineer2 days ago
Full TimeRemoteTeam 11-50Since 2020H1B No Sponsor

• Architect the platform. Set our warehouse/lakehouse direction and stand up the data lake and layered architecture that turns our raw system of record into trustworthy, queryable, intelligence-ready data. • Build the pipelines. Design and run batch and streaming pipelines that move data reliably out of our production systems - CDC, ELT, and real-time where it matters. • Model the data. Define the canonical datasets and models the whole company depends on, getting the grain, semantics, and contracts right. • Own reliability and accuracy. This is financial data, so correctness is non-negotiable. You'll own data quality, observability, integrity checks, and the testing and monitoring that let us trust it. • Build for a regulated environment. Design in role-based access, masking, lineage, and auditability from day one, and keep sensitive financial data out of places it doesn't belong. • Enable AI/ML and analytics. Build the feature pipelines and trustworthy data foundation our intelligence work relies on, moving us from systems of record toward systems of intelligence and action. • Set the standard. Establish the practices, tooling, and CI/CD for data that the future team inherits. You're setting the bar, not just clearing it.

United States
Reos GmbH logo

Senior Data Engineer

Reos GmbH

Ihr digitaler Property Manager. imAward-Gewinner 2021 & 2023 🏆

Data Engineer2 days ago
Full TimeRemoteTeam 51-200Since 2017H1B No Sponsor

Role Description Dein täglicher Verantwortungsbereich: - Entwicklung und Verantwortung der Architektur sowie Implementierung skalierbarer ETL‑Pipelines auf Basis von Microsoft Fabric. - Effiziente, automatisierte Integration heterogener Datenquellen, darunter MySQL‑Datenbanken, APIs und weitere. - Konzeption, Planung und Umsetzung von KI- und Automatisierungsprojekten. - Weiterentwicklung der Data‑Warehouse‑Architektur durch kontinuierliche Anpassung von Datenmodellen und Strukturen an neue Anforderungen. - Entwicklung robuster Prozesse für Datenmodellierung, -gewinnung und -produktion zur Schaffung einer stabilen Grundlage für Reporting, Analytics und KI‑Anwendungen. - Hohe Standards der Datenqualität, Sicherheit und Zuverlässigkeit im Blick behalten und Integrität, Verfügbarkeit und Vertraulichkeit entlang der gesamten Pipeline sicherstellen. - Aktives Verfolgen von Trends und technologischen Entwicklungen im Bereich Data Engineering, KI und Automatisierung. Qualifications - Abgeschlossenes Bachelor- oder Masterstudium in Informatik, Informationstechnologie oder einem vergleichbaren Fachgebiet. - Mindestens 5 Jahre Berufserfahrung mit tiefem Verständnis für die Entwicklung und Implementierung moderner ETL-Pipelines. - Praktische Erfahrung im Einsatz von Automatisierungs-Tools wie Azure Logic Apps, n8n oder Make. - Kenntnisse im Umgang mit Large Language Models sowie gängigen Patterns rund um generative KI. - Fundierte Kenntnisse in Microsoft Fabric oder Microsoft Data Factory, Apache Spark und Notebooks. - Ausgeprägtes Know-how in MySQL und Routine im Umgang mit unterschiedlichen Datenbanken und Data‑Warehousing-Lösungen. - Nachweisbare Erfolgsbilanz in der Stapelverarbeitung und der Arbeit mit strukturierten Daten (idealerweise im Immobilienumfeld). - Freude an der Weiterentwicklung im Bereich Power BI. - Fließende Deutsch- und sehr gute Englischkenntnisse. Benefits - Remote Work: Flexibles Arbeitsmodell – Arbeite bis zu 100% remote innerhalb Deutschlands oder nutze unser modernes Office in Hamburg nach Bedarf. - Workation: Arbeitsumfeld mit Urlaubsfeeling – genieße die perfekte Symbiose aus produktiven Schaffen und entspannter Atmosphäre im europäischen Raum. - Wellbeing: Betriebliches Gesundheitsmanagement – ein jährliches Gesundheitsbudget sowie eine bezuschusste Mitgliedschaft beim Urban Sports Club. - Altersvorsorge: Attraktive Bezuschussung zur betrieblichen Altersvorsorge. - Hardware: Modernste Technik – damit wir gemeinsam innovativ bleiben. - Rabatte: Attraktive Angebote bei über 1.500 Anbietern aus den Bereichen Sport, Mobilität, Mode und Reisen. - Knowledge Base: Vielfältige, individuelle Entwicklungs- und Weiterbildungsmöglichkeiten. - Networking: Regelmäßige Teamevents. - Kostenlose Limonade und Obstkorb.

Germany

Senior Data Engineer

Houseful

Houseful uses data insights to help clients make smarter property decisions through advanced property searches, custom financial assessments, and risk managemen

Data Engineer2 days ago

Write and review maintainable code, optimize data pipelines, collaborate with cross-functional teams, and continuously improve team performance while managing efficient data systems using Databricks, Delta Lake, Python, SQL, and PySpark.

United Kingdom