Please submit your CV in English and indicate your level of English proficiency.
Mindrift connects specialists with project-based AI opportunities for leading tech companies, focused on testing, evaluating, and improving AI systems. Participation is project-based, not permanent employment.
We're building a dataset to evaluate AI coding agents - how well a model handles real-world developer tasks.
You'll create challenging tasks and evaluation criteria within realistic simulated environments:
What this is NOT:
What we look for:
Why this is hard:
Frontier models are already good at coding. Creating a task that genuinely challenges the best models is non-trivial. You need to deeply understand where models fail and what scenarios reveal the difference between a good and a bad solution. Tasks have many valid solutions - writing tests that accept all correct solutions and reject incorrect ones is harder than it sounds.
Requirements and benefits
Educational qualifications
Academic and/or Professional Experience
Candidates should have a minimum of 3 years of professional experience in related roles or domain - specifically for QA-automation/testing or cybersecurity roles
How it works
Apply → Pass qualification(s) → Join a project → Complete tasks → Get paid
Compensation:
Paid per accepted task. Your rate depends on the qualification tier you reach and how efficiently you complete tasks — up to the equivalent of $50/hr. Because payment is per task, a faster pace raises your effective hourly rate.
Why this freelance opportunity might be a great fit for you?
Freelance Agent Evaluation Engineer • Stuttgart, BW, DE
Senior Messaging Engineer (M365 / Email Infrastructure) (m/w/d) STRABAG BRVZ GMBH & CO.KG Direktanstellung (mit Berufserfahrung) Stuttgart JOB-ID: 1021 Senior Messaging Engineer (M365 / Email Infra... Mehr anzeigen
AZAV zertifizierter Bildungsträger mit klarem Fokus auf Projektmanagement und Künstliche Intelligenz.Unsere praxisnahen Weiterbildungen bereiten dich gezielt auf den nächsten Karriereschritt vor – ... Mehr anzeigen
Wir suchen motivierte und detailorientierte Personen, die von der Bequemlichkeit des eigenen Zuhauses aus an Online-Umfragen teilnehmen möchten.Als Teilnehmer an Online-Umfragen liefern Sie we... Mehr anzeigen
Fluent Croatian + strong English (B2+).Yes 2 months of paid accommodation + travel reimbursement up to 250.Competitive base + performance bonuses.Opportunities like this don't come often.You'll be ... Mehr anzeigen
Mit mehr als 350 Märkten in Deutschland und über 660 Märkten in 10 Ländern gehören wir zu den führenden Baumärkten Europas.Unsere Vision ist es, die erste Anlaufstelle für alle Fragen und Projekte ... Mehr anzeigen
Senior SAP Anwendungsberater (m/w/d) - Schwerpunkt FI/CO in Reutlingen.Menschen an mehr als 200 Standorten setzen sich jeden Tag bei der familiengeführten Unternehmensgruppe Heinrich Schmid dafür e... Mehr anzeigen
Sehr gutes Gehalt und ein attraktives Bonusmodell.Flexible Arbeitszeiten, Homeoffice-Option, 31 Tage Urlaub.Mobilitätsangebot (Bahn, Bike, Auto).Moderne IT-Ausstattung, Laptop/Handy auch zur privat... Mehr anzeigen
AZAV zertifizierter Bildungsträger mit klarem Fokus auf Projektmanagement und Künstliche Intelligenz.Unsere praxisnahen Weiterbildungen bereiten dich gezielt auf den nächsten Karriereschritt vor – ... Mehr anzeigen
MANNDECKUNG ist ein mehrfach ausgezeichneter Top-Arbeitgeber und steht für innovative technologische Lösungen.Wir verbinden menschliche Kompetenz mit technologischer Innovation und entwickeln so pa... Mehr anzeigen
At TechBiz Global, we are providing recruitment service to our TOP clients from our portfolio.We are currently seeking a Senior Formal Verification (FV) Engineer to join one of our clients' teams.R... Mehr anzeigen
Reboot Monkey is a global datacenter services provider headquartered in Haarlem, Netherlands, operating.We deliver colocation, IP transit, smart hands, remote hands, and managed datacenter services... Mehr anzeigen
Clients need a single point of contact who actually understands hardware, not just a relationship manager who has to relay every technical question.Projects span hardware deployment, structured cab... Mehr anzeigen
Architekt (m/w/d) für unser Ingenieurbüro in Reutlingen.Menschen an mehr als 170 Standorten setzen sich jeden Tag bei der familiengeführten Unternehmensgruppe Heinrich Schmid dafür ein, dass Handwe... Mehr anzeigen
Wir suchen ab sofort mehrere Customer Service Mitarbeiter (m/w/d) in Vollzeit.Neben einer abwechslungsreichen Aufgabe erwartet Sie ein Arbeitsvertrag mit übertariflicher Bezahlung, sowie eine beruf... Mehr anzeigen
Bachelors degree, valid work permit for Germany.As soon as possible limited vacancies, apply fast!.Competitive salary + signing bonus .Apply here or send your CV in English to.AI Prompt Evalua... Mehr anzeigen
Data & Cloud Integration Engineer (m/w/d) in Reutlingen.Menschen an mehr als 200 Standorten setzen sich jeden Tag bei der familiengeführten Unternehmensgruppe Heinrich Schmid dafür ein, dass Handwe... Mehr anzeigen
Lesen Sie den Überblick über dieses Stellenangebot, um zu verstehen, welche Fähigkeiten, einschließlich relevanter Soft Skills und Softwarepaket-Kenntnisse, erforderlich sind.Möchten Sie Ihre Ideen... Mehr anzeigen
Job DescriptionSenior Messaging Engineer (M365 / Email Infrastructure) (m/w/d)\ NSTRABAG BRVZ GMBH & CO.KG\ N Direktanstellung (mit Berufserfahrung)\ NStuttgart\nJOB-ID: 1021\ NSenior Messaging... Mehr anzeigen
Hey there! David Kennedy Recruitment is on the lookout for an amazing Freelance Recruitment Partner to join our team.If you're a true hunter and love connecting talented individuals with our client... Mehr anzeigen
At TechBiz Global, we are providing recruitment service to our TOP clients from our portfolio.If you're looking for an exciting opportunity to grow in a innovative environment, this could be the pe... Mehr anzeigen
