Automatisierte Tests für regressionkritische Frontend- API- und Integrationsflows aufbauen und pfelgen
Testautomatisierung in bestehende GitLab-CI/CD-Prozesse integrieren und als QualityGate vor Deployments nutzbar machen
Automatisierte Testfälle für Chatbot API und Frontend definieren
RAG-/LLM-Evaluation
Automatisierte LLM-/RAG-Evaluationen aufsetzen inklusive Eval-DatensätzenQualitätsmetriken Schwellenwerten und reproduzierbaren Eval-Runs
RAG-Antworten anhand definierter Qualitätskriterien prüfen z. B. fachliche Korrektheit Verständlichkeit Prägnanz Zielgruppenorientierung und Quellenbezug
Übergreifend
QA-Automasierungs- und Eval-Prozess für Plattform und Chatbot strukturieren
Testdaten Eval-Sets Testprotokolle und QA-Statusübersichten pflegen
Go-/No-Go-Einschätzung für den Launch vorbereiten
Mehrjährige Erfahrung als QA (Automation) Engineer für Web- Plattform- oder digitale Produktumfelder
Praktische Erfahrung im Aufbau und in der Pflege automatisierter Tests z. B. mit Playwright WebdriverIO oder vergleichbaren Frameworks
Sicher im Umgang mit Testkonzepten Testfällen Bug-Reports und Regressionstests
Erfahrung mit CI/CD-Pipelines idealerweise GitLab und der Integration automatisierter Tests in Deployment-Prozesse
Technisches Verständnis für APIs Web-Frontends CMS-basierte Systeme und integrierte Plattformarchitekturen
Erfahrung in agilen Teams und enger Abstimmung mit Entwicklung und Produktmanagement
Strukturierte analytische und eigenständige Arbeitsweise
Sehr gute Deutschkenntnisse mindestens C1
Erfahrung mit LLM-/RAG-Evaluationen idealerweise mit Azure AI Foundry / Azure AIEvaluation SDK Langfuse RAGAS DeepEval Promptfoo LangSmith Arize Phoenixoder vergleichbaren Eval-/Observability-Frameworks
Verständnis von Qualitätsmetriken wie Groundedness Relevance CoherenceFluency und Completeness
Erfahrung mit Eval-Datensätzen Ground Truth Golden Sets oder synthetischenTestfällen
Erfahrung mit API-Tests Performance-Tests oder Penetrationstests
Erfahrung mit Content-Management-Systemen idealerweise Strap
Wie sieht der Rekrutierungsprozess bei Ekkiden aus
Bei Ekkiden sind wir bestrebt jedem Kandidaten eine positive Erfahrung zu bieten.
Erstgespräch: Unser Rekrutierungsteam wird sich mit Ihnen in Verbindung setzen um Ihre Motivation und Erwartungen zu besprechen.Interviews: Je nach der Rolle für die Sie sich bewerben führen Sie ein oder zwei Interviews mit unseren Geschäftsleitern.Kundengespräch: Schließlich haben Sie die Möglichkeit den Kunden kennenzulernen.Obwohl dies unser Standardprozess ist können wir Anpassungen vornehmen die auf spezifischen Umständen basieren.
Required Experience:
IC
QA Automation Engineer (mwd) • Berlin, Berlin, Germany
VAPA GmbH is a fast growing startup with focus on Ad Automation, which by the way is more than just bid management.We are a diverse team from many different countries, where trust, personal respons... Mehr anzeigen
Personio's intelligent HR platform helps small and medium-sized organizations unlock the power of people by making complicated, time‑changing tasks simple and efficient.Our team of 1,500 Personios ... Mehr anzeigen
This is a role that Atlas, our AI Recruiter, is hiring for on behalf of one of our customers.He'll pick the best candidates from Nova's network.We are scaling rapidly, but sustainable acceleration ... Mehr anzeigen
Senior) Software Engineer (ML Engineer) - AI Platform (m/f/d).Join to apply for the role at CARIAD.We are CARIAD, the automotive software company of the Volkswagen Group.Our teams build automotive ... Mehr anzeigen
At FORMEL SKIN, we're at the forefront of revolutionizing dermatology and reshaping the landscape of healthcare.Our mission is to establish a global online dermatology clinic, making highly effecti... Mehr anzeigen
This position is based in our logistics location in Kobern-Gondorf.If you relocate for the role and your home address is at least 80 km from the site, we support you with a relocation bonus.Operati... Mehr anzeigen
Internally, we believe the companies that win the next decade will be the ones that turn AI from a tool into a multiplier - embedded into how every team works, not just shipped as a product feature... Mehr anzeigen
STARK is a new kind of defence technology company revolutionising the way autonomous systems are deployed across multiple domains.We design, develop, and manufacture high-performance unmanned syste... Mehr anzeigen
Werde auch du "part of netgo group" - einem der größten IT-Dienstleister Deutschlands.Mitarbeiter*innen an zahlreichen Standorten in ganz Deutschland erwarten dich als neues Teammitglied.Du sorgst ... Mehr anzeigen
This is a role that Atlas, our AI Recruiter, is hiring for on behalf of one of our customers.He'll pick the best candidates from Nova's network.The company is building the AI-first software layer f... Mehr anzeigen
Taktile helps financial institutions make smarter, safer decisions with the power of AI.Internally, we believe the companies that win the next decade will be the ones that turn AI from a tool into ... Mehr anzeigen
Mitarbeitende tragen mit ihrer kreativen und sorgfältigen Arbeit täglich dazu bei, neue Therapien voranzubringen und Innovationen weltweit zu etablieren.Mit unserer Forschung unterstützen wir die E... Mehr anzeigen
Ich übernehme die Verantwortung für die durchgehende Automatisierung der On-Prem-Infrastruktur bei 50Hertz.Das macht den Job für mich interessant:.Als Innovationstreiber in der Energiebranche bring... Mehr anzeigen
Be among the first 25 applicants.Get AI-powered advice on this job and more exclusive features.Amazon is building the next generation software, hardware, and processes that will run global manufact... Mehr anzeigen
Unser zukünftiger Unternehmensstandort wird sich ab Februar 2027 in Berlin-Tempelhof befinden.Entwicklung, Integration und Betrieb passgenauer Automatisierungslösungen.Überwachung und kontinuierlic... Mehr anzeigen
Packmatic is seeking a Product Owner in Berlin to lead their product team.You will manage user stories and help implement processes while communicating with stakeholders to ensure smooth delivery.T... Mehr anzeigen
We are service‑driven at our core, focused on delivering practical, high‑quality solutions that create long‑term impact.You can read more about our data philosophy.Our clients range from Series A v... Mehr anzeigen
Product Owner - Optimization and Automation in System Operations (w/m/d)# Product Owner - Optimization and Automation in System Operations (w/m/d)Berlin Vollzeit 55000 - 70000 € / Jahr (gesch... Mehr anzeigen
