Job Closed
This listing is no longer active.
Connecting You to Better: MeridianLink is the developer of the industry's first multi-channel loan origination system.
Data Engineer
Location
United States
Posted
100 days ago
Salary
$98.9K - $134.5K / year
Seniority
Mid Level
Job Description
Data Engineer
MeridianLink
• Design, develop, and operate large scale data pipelines to support internal and external consumers • Improve and automate internal processes • Monitor jobs and pipelines to resolve and/or alert the team • Integrate data sources to meet business requirements • Write robust, maintainable, well documented code
Job Requirements
- 2-4 years professional Data Engineering and Data warehousing experience
- Extremely strong implementation experience in Python, Parquet, Spark, Azure Databricks, Delta Lake, Databricks Data Warehouse. Databricks workflows, Delta Sharing and Unity Catalog.
- Experience managing data ingress (import) and egress (export) processes within Informatica ETL workflows.
- SQL development knowledge – Stored procedures, triggers, jobs, indexes, partitioning, pruning etc.
- Be able to write/debug complex SQL queries
- ETL/ELT and Data-warehousing techniques and best practices
- Experience building, maintaining, and scaling ETL/ELT processes and infrastructure
- Implementation experience with various data modelling techniques
- Implementation experience working with a BI visualization tool (Sisense or Sigma is a plus)
- Experience with CI/CD tools (Preferred Gitlab, Jenkins)
- Experience with cloud infrastructure (Azure strongly preferred)
- Experience working in a fast-paced product environment, with an attitude of getting the job done with the least amount of tech debt
- Knowledge of being able to work with a variety of Ingestion patterns such as API/SQL servers etc.
- Knowledge of Master Data Management
- Prior Financial industry experience a plus
- Be able to navigate ambiguity and pivot based on business priorities with ease
- Strong communication skills
- Be a team player and able to collaborate well
Benefits
- Insurance coverage (medical, dental, vision, life, and disability)
- Flexible paid time off
- Paid holidays
- 401(k) plan with company match
- Remote work
Related Guides
Related Categories
Related Job Pages
More Data Engineer Jobs
• Wsparcie w budowie i rozwoju potoków danych w środowisku RTB • Pomoc w projektowaniu systemów o niskiej latencji (miliony QPS), w tym analiza i proste optymalizacje wydajności • Współpraca przy kształtowaniu architektury rozwiązań, z naciskiem na jakość, skalowalność i efektywność • Implementacja rozwiązań w Pythonie, SQL i Kafka; analiza kodu w Go w serwisach partnerskich; wprowadzenie do stosu Scala/JVM (Spark/Flink) • Wsparcie w procesie wdrożeń i utrzymaniu systemów w chmurze (głównie GCP)
• Budowa i rozwój nowych potoków danych w środowisku RTB. • Projektowanie systemów o ultra-niskiej latencji (miliony QPS), w tym budżetowanie latencji oraz optymalizacja wydajności. • Udział w kształtowaniu architektury rozwiązań oraz zapewnianiu równowagi pomiędzy jakością, skalowalnością i efektywnością realizacji. • Udział w implementacji rozwiązań w Pythonie, SQL i Kafka; analiza kodu w Go w serwisach partnerskich; praca ze stosem Scala/JVM (Spark/Flink). • Pomoc w zarządzanie procesem wdrożeń oraz utrzymaniem systemów w środowisku chmurowym (głównie GCP).
Role Description En tant que Lead Data Engineer chez Leakmited, vous jouerez un rôle clé dans la construction et la maintenance des fondations data qui alimentent nos produits basés sur l’IA et la donnée. Vous concevrez, développerez et opérerez des pipelines de données robustes sur AWS et Databricks, en garantissant un haut niveau de qualité, de fiabilité et d’observabilité sur l’ensemble du cycle de vie des données. Vous évoluerez dans un environnement fortement transverse, en collaboration étroite avec les équipes software, data science, opérations et commerciales. Ce rôle s’adresse à une personne curieuse des enjeux business, aimant le développement hands-on et souhaitant construire des systèmes data à fort impact, directement liés aux décisions produit et opérationnelles. Notre stack technique: - Python - Geopandas - Unity Catalog - Databricks - SQL - PostgreSQL / PostGIS - DBT - GitHub - GitHub Actions - AWS - MLflow - Spark - LangChain / LangGraph / LangSmith Vos responsabilités: - Collaborer au sein d’équipes projets transverses avec des data scientists, développeurs et product owners afin d’intégrer les pipelines de données dans des architectures de production - Concevoir, développer et maintenir des pipelines de données et des processus ETL scalables et fiables sur AWS et Databricks - Accompagner les data scientists dans le déploiement performant des modèles de machine learning - Participer à des boucles de feedback continues afin d’améliorer les produits data en fonction de leur usage réel et de leurs performances - Contribuer à l’évolution de l’architecture data de Leakmited, avec un focus sur la robustesse, la scalabilité et la maintenabilité - Garantir la qualité des données, leur observabilité et leur monitoring, afin de permettre des décisions fiables et des itérations rapides - Travailler en étroite collaboration avec les équipes opérationnelles et business pour comprendre les cas d’usage, traduire les besoins en solutions data et les déployer Company Description
Staff Data Engineer
TCGplayer (an eBay company)TCGplayer is a leading online technology platform for the collectibles industry.
• Function as a technical leader and advisor within the data technology field at TCGplayer, nurturing the growth and progress of both the company and individual engineers • Provide technical expertise and insight as you work with other teams to develop data flow strategies and define storage needs for microservices, ensuring scalability, reliability, and alignment with system architecture • Manage cross-application projects for datastores, emphasizing security, software currency, data governance, and platform migrations • Research emerging capabilities in both the datastores used by the organization and the broader marketplace to inform long-term strategic planning in the data domain • Consult on database design for the structures within an application’s datastores and queries/aggregations against those structures, optimizing for performance and scalability • Write minimal yet effective code, primarily database queries to facilitate data management and manipulation and proof-of-concepts for suggested techniques • Guide selection of appropriate datastore technologies for new and re-platformed apps, focusing on transactional microservices and event-driven systems to meet current and future data needs


