Talent.com
Freelance AI Evaluation Engineer (Python/Full-Stack)
Freelance AI Evaluation Engineer (Python/Full-Stack)Mindrift • Hamburg, HH, DE
Es werden keine Bewerbungen mehr angenommen
Freelance AI Evaluation Engineer (Python/Full-Stack)

Freelance AI Evaluation Engineer (Python/Full-Stack)

Mindrift • Hamburg, HH, DE
Vor 30+ Tagen
Anstellungsart
  • Homeoffice
  • Quick Apply
Stellenbeschreibung

Please submit your CV in English and indicate your level of English proficiency.

Mindrift connects specialists with project-based AI opportunities for leading tech companies, focused on testing, evaluating, and improving AI systems. Participation isproject-based, not permanent employment.

What this opportunity involves

You’ll create challenging coding test cases that push AI coding systems to their limits:

  • Review and refine realistic coding tasks based on provided production codebases with realistic scope, requirements and information sources
  • Write comprehensive functional tests that validate actual end-to-end behavior and edge-cases, not just superficial checks
  • Craft “fair but hard” challenges where the AI has all the context it needs, but has to work for it (information scattered across files and external sources, complex reasoning required)
  • Analyze AI failures to understand what the model struggles with vs. what it masters
  • Iterate based on feedback from expert QA reviewers who score your work on 7 quality criteria

What we look for

This opportunity is a good fit for experienced developers, software engineers, and/or test automation specialists open to part-time, non-permanent projects. Ideally, contributors will have:

  • Degree in Computer Science, Software Engineering or related fields
  • 5+ years in software development, primarily Python (pytest, async/await, subprocess, file operations)
  • Background in Full-Stack development, with an equal focus on building React-based interfaces and robust Back-end systems
  • Experience writing tests (functional, integration – not just running them)
  • Docker containers (running evaluations locally in containers)
  • CI/CD understanding (GitHub Actions as a user: triggers, labels, reading results)
  • English proficiency - B2

How it works

Apply → Pass qualification(s) → Join a project → Complete tasks → Get paid

Effort estimate

Tasks for this project are estimated to take 20 hours to complete, depending on complexity. This is an estimate and not a schedule requirement; you choose when and how to work. Tasks must be submitted by the deadline and meet the listed acceptance criteria to be accepted.

Compensation

On this project, contributors can earn up to $50 per hour equivalent, depending on their level and pace of contribution.

Compensation varies across projects depending on scope, complexity, and required expertise. Please note that other projects on the platform may offer different earning levels based on their requirements.

Jobalert für diese Suche erstellen

Freelance AI Evaluation Engineer (Python/Full-Stack) • Hamburg, HH, DE

Ähnliche Stellen

AI Engineer (m/w/d) Inputmanagement & Dokumentenverarbeitung

Goodman Masson DeutschlandHamburg, de

In einem technologisch geprägten Umfeld mit starkem Fokus auf digitale Transformation wird die Weiterentwicklung des Inputmanagements als zentraler Hebel für Effizienz und Skalierbarkeit gesehen.Di...Mehr anzeigen

 • Gesponsert

Computer Engineer as Trainee Data Engineer / Data Scientist (m/w/d)

ISR Information Products AGHamburg, DE

Du hast Freude an Innovationen, spannenden Inhalten und kollegialem Teamspirit? Mit unseren Berater:innen wächst du mit deinen Aufgaben und lernst von unseren Expert:innen.Gemeinsam beraten wir uns...Mehr anzeigen

 • Gesponsert

AI Workflow Engineer - Freelance AI Trainer

MindriftHamburg, HH, DE
Homeoffice
Quick Apply

Mindrift is looking for skilled.LLMs within our hybrid AI + human environment.In this role, as an AI Pilot – that’s how we refer to this position at Mindrift – you’ll collaborate with Tendem Agents...Mehr anzeigen

Software Engineer AI - Senior Expert (m/w/d)

Deutsche Telekom AGHamburg, de

Die Telekom IT ist integraler Bestandteil der Deutschen Telekom.IT-Spezialisten in sieben Ländern vereinfachen, digitalisieren und beschleunigen wir die Prozesse in unserem Großkonzern.In einer Zei...Mehr anzeigen

 • Gesponsert

Python-Entwickler (w/m/d)

Vertec AGBuchholz in der Nordheide, Germany

Du verfgst ber gute Kenntnisse in Python.Du hast Freude daran, Konzepte zu entwickeln und diese technisch umzusetzen einschlielich Termine vor Ort beim Kunden in der DACHRegion (Reisettigkeit ca.Du...Mehr anzeigen

 • Gesponsert

IT-Consultant Conversational AI (all genders)

adesso SEDüsseldorf, Köln, Essen, Hamburg, Paderborn, Münster, weitere Standorte in DE, DE

Exzellenz – und damit auch für vielfältige Entwicklungsmöglichkeiten für alle adessi.Wir wachsen gemeinsam und lernen voneinander: in anspruchsvollen Projekten, interdisziplinären Teams und mit zie...Mehr anzeigen

 • Gesponsert • Neu!

AI Platform Engineer (m/w/d) - Datenbankentwicklung/BI, Ingenieur

Reply Deutschland SEHamburg, DE

Über unsere Plattform Huacaya:***Huacaya ist unsere On-Premise-Plattform für KI-Entwicklung und -Deployment.Die Plattform deckt den gesamten KI-Lebenszyklus ab und bietet Unternehmen eine robuste G...Mehr anzeigen

 • Gesponsert

AI Engineer Experte für Large Language Models (w/m/d) - System Engineering / Admin, Ingenieur

PwC DeutschlandHamburg, DE

Für unseren Geschäftsbereich Transformationsuchen wir dich zum nächstmöglichen Zeitpunkt als AI Engineer Fokus Large Language Models (w/m/d).AI-Engineering – Du implementierst komplexe KI-Systeme f...Mehr anzeigen

 • Gesponsert

Senior Data Engineer (m/w/d) / Schwerpunkt Snowflake - Projektmanagement, Anwendungsentwicklung, Datenbankentwicklung/BI, Ingenieur

Infomotion GmbHHamburg, DE

Erfolg beginnt dort, wo Erfahrung auf Exzellenz trifft – und Daten echte Wirkung erzeugen.Wir sind die AI & Data Performance Company – mit über 750 Datenenthusiastinnen und -enthusiasten in Deutsch...Mehr anzeigen

 • Gesponsert

Senior Data Engineer / Data Architect (m/w/d) - Snowflake & Data Lakehouse

AkkodisHamburg, de

Senior Data Engineer / Data Architect (m/w/d) - Snowflake & Data Lakehouse.Akkodis ist ein globales Beratungsunternehmen für Digital Engineering, das Technologie und Talente zusammenbringt, um Tran...Mehr anzeigen

 • Gesponsert

Data Engineer - Digital Health Excellence Center (w/m/d) - Datenbankentwicklung/BI, Ingenieur

EY DeutschlandHamburg, DE

Are you ready to shape your future with confidence?.Gemeinsam die Welt jeden Tag ein bisschen besser machen.Für diesen Anspruch setzen wir bei EY alles in Bewegung und gehen als Team „all in“.Schli...Mehr anzeigen

 • Gesponsert

AI Engineer / Software Engineer (all genders) - System Engineering / Admin, Anwendungsentwicklung, Ingenieur

adessoHamburg, DE

Als Teil der adesso group bündelt die adesso insurance solutions GmbH das eigene Produktportfolio für den Versicherungsmarkt und treibt innovative Software-Lösungen in diesem Umfeld voran.Wir sind ...Mehr anzeigen

 • Gesponsert

Data Analytics Engineer (w/m/d) - Business Analysis, Datenbankentwicklung/BI, Ingenieur

freenetHamburg, DE

Unser Bereich Customer Management entwickelt und betreibt auf einer skalierenden AWS-Infrastruktur eine wachsende Zahl an datengetriebenen Lösungen mit signifikantem Business Impact.Dafür arbeiten ...Mehr anzeigen

 • Gesponsert

Senior Fullstack Engineer FIND (m/w/d) // Remote möglich

E. Breuninger GmbH & Co.Hamburg, de
Homeoffice

Senior Fullstack Engineer FIND (m/w/d) // Remote möglich.Als Senior Fullstack Engineer (m/w/d) übernimmst du im Team FIND aktiv Ownership für deinen Code, treibst technische Entscheidungen voran un...Mehr anzeigen

 • Gesponsert

AI Engineering Lead (m/w/d)

QodiaBuchholz in der Nordheide, Germany

Wir suchen erfahrene Engineers mit starkem Background in Softwareentwicklung, KI &.Machine Learning, die Lust haben, als fhrendes Teammitglied eine technische Vision.Fundierte Kenntnisse in NLP, LL...Mehr anzeigen

 • Gesponsert

Low-Code AI Developer (m/w/d) – Microsoft Power Platform & Copilot Studio

Reply GroupHamburg, de

Low-Code AI Developer (m/w/d) – Microsoft Power Platform & Copilot Studio.Du entwickelst smarte KI-Agenten mit Microsoft Copilot Studio (Power Virtual Agents) und sorgst dafür, dass sie echten Mehr...Mehr anzeigen

 • Gesponsert

Senior Analytics Engineer (w/m/d)

freenet DLS GmbHHamburg, DE

Portfolio rund um die Themen Mobilfunk, Internet und TV-Entertainment.Online sowie in rund 520 eigenen Shops erhält jeder Kunde die ideale Lösung für sein digitales Leben.Deutschlandweit beraten wi...Mehr anzeigen

 • Gesponsert

Data Engineer (m/w/d) - Azure Logic Apps & MS Fabric

Peter Döhle Schiffahrts-KGHamburg, DE

Als familiengeführte Unternehmensgruppe ist Döhle seit fast 70 Jahren ein verlässlicher Partner in der maritimen Branche.Mitarbeitenden weltweit - an Bord und an unseren Standorten u.Hamburg, Singa...Mehr anzeigen