AgileEngine logo
AgileEngine

AgileEngine is an Inc. 5000 company that creates award-winning software for Fortune 500 brands and trailblazing startups across 17+ industries. We rank among the leaders in areas like application development and AI/ML, and our people-first culture has earned us multiple Best Place to Work awards.

Senior/Lead QA Automation Engineer

QA Automation EngineerQA Automation EngineerFull TimeRemoteLeadTeam 1,001-5,000

Location

Worldwide

Posted

21 days ago

Salary

0

Seniority

Lead

No structured requirement data.

Job Description

Senior/Lead QA Automation Engineer

AgileEngine

Role Description We are looking for a Senior/Lead QA Automation Engineer to own and evolve automated testing frameworks, introduce AI-assisted QA practices, and define quality engineering strategy across an AI-driven product development environment. You will architect automation across the full testing stack — unit, integration, API, UI, performance, and security — integrate quality gates into CI/CD pipelines, design evaluation frameworks for LLM-based features, and mentor engineers in modern automation and AI-augmented workflows. What You Will Do - Own and evolve the organization’s automated testing framework and QA tooling ecosystem; - Define and standardize AI-assisted testing practices, including test case/data generation, coverage discovery, and responsible AI guardrails; - Implement intelligent test selection, regression analysis, and measurable quality metrics to optimize release quality and reduce risk; - Ensure AI-augmented tests remain deterministic, maintainable, production-ready, and supported by traceability, validation, and drift detection; - Architect and scale automation across unit, integration, API, UI, contract, performance, and security testing; - Champion modern testing principles, integrate automation into CI/CD, and enforce quality gates and release readiness criteria; - Design evaluation frameworks for AI-powered features, including prompt robustness, deterministic validation, and human-in-the-loop review where appropriate; - Lead root-cause analysis for systemic quality issues and continuously improve automation ROI and test effectiveness; - Mentor engineers on modern automation, AI-assisted workflows, prompt engineering, and review standards for AI-generated code; - Define and track QA KPIs, provide data-driven Go/No-Go recommendations, and improve testing strategy based on measurable outcomes; - Partner with Engineering, Product, Security, and DevOps to embed quality early, influence architecture, and integrate accessibility, security, and privacy testing throughout the SDLC. Qualifications - 5+ years of experience in software quality engineering, test automation, or SDET roles; - 3+ years leading automation strategy or serving as a senior technical QA authority; - Hands-on experience using AI tools for test generation, refactoring, and automation maintenance; - Experience evaluating LLM-based systems (prompt robustness, structured outputs, drift detection, and versioned regression suites); - Strong proficiency in at least one programming language (TypeScript, Java, Python, etc.) and modern test frameworks (e.g., Playwright, Cypress, Selenium); - Demonstrated experience designing, maintaining, and scaling test automation frameworks and CI/CD quality gates; - Strong understanding of distributed systems, HTTP lifecycle, and database querying (SQL/NoSQL); - Experience mentoring engineers and leading quality initiatives with measurable outcomes; - Upper-intermediate English level. Requirements - Working knowledge of secure testing practices (OWASP Top 10) and performance testing strategy; - Familiarity with compliance, privacy, or regulated industry SaaS environments; - Experience implementing performance/load testing strategies; - Experience with accessibility testing strategy and tooling. Benefits - Professional growth: Mentorship, TechTalks, and personalized growth roadmaps. - Competitive compensation: USD-based pay with education, fitness, and team activity budgets. - Exciting projects: Modern solutions with Fortune 500 and top product companies. - Flextime: Flexible schedule with remote and office options.

Related Categories

Related Job Pages

More QA Automation Engineer Jobs

Cobalt logo

Senior GTM Systems – Automation Engineer

Cobalt

Modern pentesting for security and development teams.

Full TimeRemoteTeam 201-500H1B Sponsor

• Build and own the technical infrastructure that powers our revenue engine. • Own the systems, automations, integrations, and data foundations that enable our teams to operate more efficiently and make better decisions. • Architect scalable solutions across Salesforce, HubSpot, AI-powered workflows, and the broader GTM technology stack. • Ensure the business has clean data, reliable systems, and streamlined processes. • Modernize and scale our GTM infrastructure, improve data quality and system reliability, increase automation across the revenue organization, reduce operational bottlenecks, and help establish a more AI-native operating model.

United States
$135K - $160K / year
Excellus BlueCross BlueShield logo

Senior DevSecOps Engineer

Excellus BlueCross BlueShield

UPSTARS – продуктова IT-компанія, з якою злітають і люди, і бренди. Наш основний фокус – технологічні рішення та B2B-послуги для міжнародних клієнтів.

Full TimeRemoteTeam 2-10H1B No Sponsor

Role Description Senior DevSecOps Engineer. - Побудувати базову операційну модель Application & Infrastructure Security: визначити ownership, SLA, процеси тріажу, винятків, прийняття ризиків, ескалацій і звітності; - Впровадити процес vulnerability management: виявлення вразливостей, пріоритизація, визначення відповідальних, контроль строків виправлення, управління винятками, remediation та метриками; - Інтегрувати security controls у SDLC та CI / CD: SAST, SCA, SBOM, secret scanning, container / image scanning, перевірки Dockerfile та поетапні quality gates у пайплайнах; - Побудувати базовий рівень supply chain security: контроль залежностей, lock-файли, підписування артефактів, захист CI / CD, protected branches та інші механізми безпеки; - Впровадити cloud та infrastructure security baseline через IaC: IAM Policies, KMS, CloudTrail, GuardDuty, Security Hub, IaC scanning та інші інструменти контролю безпеки; - Впровадити Kubernetes security controls: Pod Security Standards та / або Kyverno, Network Policies, RBAC review, admission control для контейнерних образів, audit logs і підходи до runtime security; - Співпрацювати з engineering та platform-командами над усуненням знахідок, зменшенням кількості false positives, покращенням secure coding practices, підготовкою політик, інструкцій та audit evidence для PCI DSS та інших аудитів. Qualifications - 5+ років практичного досвіду в DevSecOps / Application Security; - Практичний production-досвід інтеграції security tools у CI / CD, зокрема GitLab CI та / або GitHub Actions; - Досвід роботи з SAST, SCA, secret scanning, container / image scanning та security quality gates, використання інструментів рівня Semgrep, SonarQube, Trivy, Snyk, Grype, Gitleaks або аналогів; - Розуміння безпеки CI / CD: protected branches, protected environments, secrets management, CODEOWNERS, принципів мінімізації прав для runners і service accounts; - Досвід побудови процесів vulnerability management: тріаж, пріоритизація, SLA, винятки, прийняття ризику, визначення відповідальних, звітність і зниження кількості false positives; - Розуміння supply chain security: SBOM, dependency pinning, lock-файли, artifact signing, provenance, ризики залежностей і складу програмного забезпечення; - Production-досвід у cloud security (переважно AWS): IAM Policies, Security Groups, KMS, CloudTrail, GuardDuty, Security Hub, Config Rules, VPC Design; - Досвід роботи з Kubernetes Security: Pod Security Standards, Network Policies, RBAC, admission control, image policy, audit logs; - Досвід роботи з IaC Security (переважно Terraform): tfsec, Checkov, policy-as-code або аналогічні рішення; - Впевнене написання автоматизації на Python, Bash або Go: власні етапи пайплайнів, автоматизація тріажу, API-інтеграції, звітність; - Розуміння OWASP Top 10, типових web-вразливостей, принципів безпечної розробки та практичних підходів до їх усунення; - Здатність працювати самостійно, пріоритизувати задачі, досягати результатів з мінімальним контролем та ефективно взаємодіяти з engineering, platform і business-командами. Requirements - Досвід роботи в gambling, fintech або інших регульованих індустріях; - Практичний досвід роботи з PCI DSS, зокрема Requirement 6 та Requirement 11; - Досвід роботи з runtime security-рішеннями, такими як Falco, Tetragon або аналогами; - Досвід підписування контейнерних образів за допомогою Cosign / Sigstore або аналогічних інструментів; - Досвід роботи з DAST-рішеннями (OWASP ZAP, Nuclei тощо) та їх інтеграцією в staging-середовища; - Досвід проведення threat modeling із використанням STRIDE або аналогічних методологій для продуктів, API та інфраструктурних змін; - Досвід побудови Security Champions програм або розробки гайдлайнів і практик безпечної розробки; - Знайомство з CSPM-платформами (Wiz, Orca, AWS-native рішення або власна автоматизація); - Досвід роботи з Dependency-Track або аналогічними рішеннями для управління SBOM і вразливостями залежностей. Benefits - Працюй там, де комфортно та безпечно – в офісах або віддалено; - Офіційне оформлення в Україні або Польщі – підтримаємо у вирішенні бюрократичних питань та допоможемо з документами; - 20 робочих днів оплачуваної відпустки, державні вихідні і лікарняні – ми за ворк-лайф беленс; - Медичне страхування у топових клініках і покриття витрат на психолога на платформі Pleso; - Benefit cafe – щомісячно витрачай кошти на уподобання, хобі, спорт тощо; - Івенти – бери участь у майстер-класах, відвідуй тімбілдинги та корпоративи; - Навчання під будь-який запит – індивідуальний бюджет на курси, корпоративна англійська, воркшопи та онлайн-бібліотека.

Poland + 1 moreAll locations: Poland | Ukraine
Full TimeRemoteTeam 51-200Since 2004H1B No Sponsor

• Working in a Scrum Squad of 3-4 other Developers and 1 other Automation QA • Following and maintaining established QA best practices within the squad • Collaborating with the Product Owner and Squad to refine Stories and Acceptance Criteria, including criteria for AI-driven features • Collaborating with the squad to design and review test scenarios and develop Java Integration Tests, Angular / Typescript tests in Playwright • Quickly identifying high-level test strategies and quality risks, including those unique to AI/ML systems (hallucination, drift, latency) • Monitor and report on quality trends such as bug churn • Leveraging AI tooling (e.g. GitHub Copilot, AI test generation tools) to accelerate test authoring and analysis • Analyse automation test run results • Adhering to existing coding standards and practices • Partaking in code review culture and technical collaboration • Attending squad meetings such as daily Stand-ups, Retrospectives, Planning, Refinements, and technical discussions • Partaking in presentations and code workshops

Poland
Full TimeRemoteTeam 5,001-10,000Since 2006H1B No Sponsor

• Design and implement a SUSE-based virtualization platform using KVM as the hypervisor. • Standardize on Infrastructure as Code using Terraform (infrastructure provisioning) and Ansible (configuration management). • Build reusable modules/roles to automate: Host provisioning and configuration. • Integrate automation with CI/CD pipelines to enable repeatable, testable infrastructure changes. • Integrate the platform and automation workflows with ServiceNow (or similar ITSM tools). • Provide APIs and integration patterns so other tools and portals can consume the platform services. • Maintain a living architecture document covering all layers: compute, storage, network, automation, observability, integrations.

Hungary
Job Closed