Capgemini logo
Capgemini

Get the Future You Want

Elasticsearch Data Engineer – Medallion Architecture

Data EngineerData EngineerFull TimeRemoteSeniorTeam 10,001+Since 1967H1B SponsorCompany SiteLinkedIn

Location

India

Posted

64 days ago

Salary

0

Seniority

Senior

Job Description

Elasticsearch Data Engineer – Medallion Architecture

Capgemini

• Design, build, and manage end-to-end data pipelines across the medallion architecture—specifically the bronze, silver (base vault with DBT and orchestration tools, business vault), and gold layers. • Ingest and process raw data using Spark and Amazon EMR for scalable, distributed computation. • Develop and automate data transformations for the base vault using DBT (Data Build Tool) to standardize and model data efficiently.

Job Requirements

  • At least 5 years of experience as an Elasticsearch Data Engineer - ELK (Elasticsearch, Logstash, and Kibana) stack Expert knowledge)
  • Java Spring Boot
  • IBM ACE Programming
  • BS in Computer Science, Data Engineering (Big Data, AWS certification), Data Modeling or similar
  • Full English Fluency
  • Strong understanding of data modeling, governance, and best practices in modern data architectures.
  • Excellent analytical, problem-solving, and communication skills.
  • Deep experience with Spark, Python and ETLs and Amazon EMR
  • Hands-on experience with DBT for data transformation and modeling.
  • Expert knowledge of Amazon S3 and Apache Iceberg for data storage and management.
  • Experience with Kubernetes for container orchestration.
  • Experience with Dremio, Looker, or equivalent business view/semantic layer technologies
  • AWS Cloud – Intermediate, AWS Lambda, Step Functions, IAM, SNS, API Gateway, VPC, Transit Gateway, Intermediate
  • JSON - Intermediate
  • Jenkins – Data Pipeline Intermediate
  • CloudWatch - Intermediate

Benefits

  • Competitive salary and performance-based bonuses
  • Comprehensive benefits package
  • Career development and training opportunities
  • Flexible work arrangements (remote and/or office-based)
  • Dynamic and inclusive work culture within a globally renowned group
  • Private Health Insurance
  • Pension Plan
  • Paid Time Off
  • Training & Development

Related Categories

Related Job Pages

More Data Engineer Jobs

Full TimeRemoteTeam 11-50Since 2006H1B No Sponsor

• Build and maintain ingestion pipelines (REST APIs, SFTP, database replication) into Snowflake • Write dbt models across bronze/silver/gold layers following established conventions • Integrate with third-party ESPs (DotDigital, Adestra, FastTrack): push segments, pull back campaign events (opens, clicks, bounces, conversions) • Develop and maintain AWS Lambda functions for data extraction and reverse ETL • Build data models for identity resolution, segmentation, and attribution • Configure and manage Airflow DAGs for orchestration • Implement data quality checks, monitoring, and alerting • Manage Snowflake and AWS infrastructure via Terraform • Investigate and resolve data incidents (pipeline failures, data quality issues, PII exposure)

Europe
Job Closed
Superlanet logo

Enterprise Data Engineering – Platform Manager

Superlanet

Advisory, Staffing, and Multi-State Employer of Record Solutions for Clinicians, by Clinicians.

Data Engineer64 days ago
Full TimeRemoteTeam 51-200Since 2017H1B No Sponsor

• Lead enterprise data engineering and platform modernization initiatives across clinical, operational, financial, and research environments • Define architectural roadmaps, governance standards, and long-term platform strategy • Support AI/ML enablement, Azure cloud initiatives, and enterprise analytics modernization • Oversee scalable data pipelines, enterprise integrations, and cloud-based analytics ecosystems • Evaluate and implement modern technologies to improve scalability, performance, and operational efficiency • Manage ETL/ELT pipelines and modern orchestration frameworks • Support enterprise data lake, warehouse, and analytics platforms • Collaborate with infrastructure, security, analytics, and application teams on enterprise integration strategies • Ensure platform reliability, scalability, security, and performance across hybrid and cloud environments • Partner with clinical, operational, and analytics stakeholders to align data initiatives with organizational priorities • Lead data mapping, governance, and healthcare data standardization efforts • Lead and mentor a blended team of FTEs, contractors, and consultants

Texas
$135K - $185K / year
Uniklinik Köln logo

Data Management Employee (m/f/d) (project-based)

Uniklinik Köln

Wir sind eine der führenden Universitätskliniken in Deutschland und vernetzen Forschung, Lehre und Krankenversorgung auf Spitzenniveau. Darum ist auch vieles bei uns eine Nummer größer: das Spektrum an spannenden Entwicklungsmöglichkeiten. Die grenzenlose Offenheit, mit der hier Spezialistinnen und Spezialisten aus der ganzen Welt zusammenarbeiten. Oder unser Einsatz als Arbeitgeber, alle Beschäftigten so gut wir können, dabei zu unterstützen, den Beruf mit ihren Zielen und Lebenssituationen in Einklang zu bringen. Das ist die Uniklinik Köln: Alles, außer gewöhnlich.

Data Engineer64 days ago

Role Description Zur Unterstützung unseres stark wachsenden Teams suchen wir ab 1.7.2026: - Mitarbeiter/in (w/m/d) im Datenmanagement (projektbezogen) - Geschäftsbereich Patientenverwaltung - Abteilung Digitalisierung und Archiv - TV-L 38,5 Std./Woche - befristet für 24 Monate im Rahmen eines Projekts - Vergütung erfolgt nach TV-L EG 10 Ihre Aufgaben: - Mitarbeit bei der Etablierung des digitalen Aktenlaufs - Unterstützung und Umsetzung von Digitalisierungsinitiativen - Selbstständige Analyse, Optimierung und Standardisierung abteilungsübergreifender Prozesse - Leitung sowie Mitarbeit in Teilprojekten mit Schwerpunkt Daten- und Prozessmanagement - Auswertung von Kennzahlen sowie Erstellung von Berichten für Stakeholder - Erstellung, Pflege und Weiterentwicklung von Dokumentationen im Dokumentenmanagement (DM) - Planung, Durchführung und Nachbereitung interner und externer Audits - Weiterentwicklung und Pflege des bestehenden Datenmanagementsystems - Beratung der Fachbereiche in qualitätsrelevanten Fragestellungen - Training, Testen und Optimierung von KI-Anwendungen Qualifications - Einschlägige Ausbildung im Gesundheitswesen, gerne mit abgeschlossener Weiterbildung im Datenmanagement - Berufserfahrung im Datenmanagement, Projektmanagement oder Prozessmanagement im Gesundheitswesen (Krankenhaus, Rehaklinik) - Kenntnisse in Datenmanagement-Methoden und -Normen - Ausgeprägtes Prozessverständnis und analytisches Denkvermögen - Affinität zu Digitalisierung, IT und strukturiertem Arbeiten - Selbstständige, lösungsorientierte und sichere Arbeitsweise - Kommunikationsstärke, insbesondere in der interdisziplinären Zusammenarbeit - Sicherer Umgang mit den gängigen Microsoft-Produkten - Erfahrung mit der Klinische Dokumentenklassen-Liste (KDL) und KI Benefits - Sie erwartet ein sicherer und sinnstiftender Job in einem anspruchsvollen Arbeitsumfeld, in dem Sie immer am Puls der Zeit sind. - Durch das flexible Arbeitszeitkonto und Wunschdienstpläne haben Sie mehr Zeit für Hobbies, Familie und Freunde. - Sie werden mit offenen Armen von einem interdisziplinären Team empfangen, das gegenseitige Wertschätzung und Hilfsbereitschaft großschreibt. - Was andere über verschiedene Stationen an Erfahrungen sammeln, gibt es bei uns als einem der größten Arbeitgeber der Region unter einem Dach – so können Sie über sich hinauswachsen und neue Ziele ins Visier nehmen. Company Description Wir sind eine der führenden Universitätskliniken in Deutschland und vernetzen Forschung, Lehre und Krankenversorgung auf Spitzenniveau. Darum ist auch vieles bei uns eine Nummer größer: das Spektrum an spannenden Entwicklungsmöglichkeiten. Die grenzenlose Offenheit, mit der hier Spezialistinnen und Spezialisten aus der ganzen Welt zusammenarbeiten. Oder unser Einsatz als Arbeitgeber, alle Beschäftigten so gut wir können, dabei zu unterstützen, den Beruf mit ihren Zielen und Lebenssituationen in Einklang zu bringen. Das ist die Uniklinik Köln: Alles, außer gewöhnlich. Während eines auf zwei Jahre befristeten strategischen Projekts soll der Aktenlauf von Papierdokumenten auf einen digitalen Aktenlauf umgestellt werden. Dafür wird zunächst der analoge Aktenlauf in Pilotkliniken analysiert, bevor darauf aufbauend digitale Abläufe definiert und implementiert werden. Ziel ist der Aufbau eines Datenmanagements, das klinikumsweit eingesetzt werden kann. Sie arbeiten dabei in der Abteilung Digitalisierung und Archiv des Geschäftsbereichs Patientenverwaltung. Dort werden alle Papierdokumente nach der Behandlung digitalisiert. Das Team Digitalisierung ist insbesondere für das digitale Archiv verantwortlich, einschließlich der Organisation der Dokumente im KDL-basierten Klinikumregister. In Abstimmung mit den Instituten wird der Transport der Papierdokumente koordiniert sowie das Scannen entweder vor Ort oder gemeinsam mit einem externen Dienstleister umgesetzt. Durch gezielte Qualitätssicherungsmaßnahmen wird der Standard des digitalen Archivs kontinuierlich verbessert. Darüber hinaus sollen Auswertungen des Aktenlaufs dazu beitragen, in den kommenden Jahren klinikumsweit eine vollständig elektronische Patientenakte einzuführen. Das Team Digitalisierung übernimmt dabei eine aktive und gestaltende Rolle. Menschen mit Behinderungen sind uns willkommen und werden bei gleicher Eignung und Qualifikation bevorzugt. Der Arbeitsbereich ist für die Besetzung mit Teilzeitkräften grundsätzlich geeignet. Contact Ulli Schwan Tel: +49 221 478-84532 Universitätsklinikum Köln AöR Geschäftsbereich Personal Kerpener Str. 62 50937 Köln Bewerbungsfrist: 28.06.2026 Job-ID: q92sswe2 Wir freuen uns auf Ihre Bewerbung und darauf Sie kennenzulernen!

Germany
Job Closed

Senior Software Engineer - Data Engineering

UnitedHealth Group

UnitedHealth Group is a healthcare and well-being company that’s dedicated to improving the health outcomes of millions around the world. We are comprised of

Data Engineer64 days ago

Role Description You will enjoy the flexibility to telecommute* from anywhere within the U.S. as you take on some tough challenges. - Design, build, and operate scalable data engineering platforms using modern ETL/ELT frameworks, including Azure Data Factory, Delta Lake, and cloud-native pipelines - Architect modular, reusable data systems that support batch and streaming workloads, advanced analytics, and AI/ML use cases - Influence overall data and AI platform architecture, including lakehouse design, metadata management, and data quality frameworks - Develop and optimize PL/SQL, Python, and Unix-based data processing solutions for high-volume, low-latency data pipelines - Enable Generative AI use cases by designing structured and unstructured data pipelines to support NLP, prompt engineering, vectorization, and inference workflows - Drive code reusability and standardized data patterns across teams through shared frameworks, libraries, and design standards - Ensure mature DevOps and DataOps practices, including CI/CD, automated testing, monitoring, incident response, and cost optimization - Deeply analyze ambiguous business and data problems, translating them into robust data engineering and AI solutions that deliver measurable business value - Lead adoption of best practices in data modeling, pipeline design, security, and governance, especially in regulated environments - Continuously assess and modernize existing data platforms, improving performance, reliability, scalability, and AI readiness - Partner with business, analytics, data science, and product leaders to manage delivery in an agile framework, rapidly delivering insights and AI-enabled capabilities - Mentor and coach engineers in data engineering, cloud, and Generative AI technologies, raising overall team capability - Attract and grow talent through strong technical leadership, effective interviewing, community engagement, and training junior interviewers - Communicate complex data and AI concepts clearly to both technical and non-technical stakeholders, including leadership presentations and solution demos - Design, develop, and deploy AI-powered solutions to address complex business challenges with emphasis on responsible use of AI Qualifications - Bachelor’s degree in CS or IT or Software Engineering related field - 7+ years of Data Engineering experience building enterprise-scale ETL/ELT solutions (e.g., ADF, DataStage, Talend, or equivalent) - 4+ years of experience with Azure public cloud including Databricks and Snowflake - 3+ years of hands-on experience with Unix/Linux shell scripting for data processing and automation - 3+ years of experience with Oracle PL/SQL development for data transformation, performance tuning, and production workloads - 3+ years of production support experience, including on-call rotations, incident resolution, and root cause analysis - 2+ years of experience with high-level programming languages, such as Python, Java, or Node.js, with Python preferred Preferred Qualifications - Excellent written and verbal communication skills, with the ability to explain data and AI concepts clearly - Prior technical or people leadership experience, including ownership of complex systems - Demonstrated experience mentoring and developing junior Engineers Requirements - *All Telecommuters will be required to adhere to UnitedHealth Group’s Telecommuter Policy. Benefits - Comprehensive benefits package - Incentive and recognition programs - Equity stock purchase - 401k contribution (all benefits are subject to eligibility requirements) Application Deadline This will be posted for a minimum of 2 business days or until a sufficient candidate pool has been collected. Job posting may come down early due to volume of applicants.

United States
$91.7K - $163.7K / year
Job Closed