At TechBiz Global, we are providing recruitment service to our TOP clients from our portfolio. We are currently seeking an Senior AI DevOps / LLMOps specialist to join one of our clients' teams. If you're looking for an exciting opportunity to grow in a innovative environment, this could be the perfect fit for you.
Key Responsibilities
Automation of Build-to-Production
- Design and implement robust CI/CD pipelines tailored for AI, covering model weights,
dataset versioning, and application code.
- Develop specialized workflows for PromptOps, ensuring that system prompts are
version-controlled, tested for regressions, and deployed with the same rigor as traditional
code.
-Automate the deployment of Agentic workflows, managing the complexities of stateful
AI interactions and multi-agent handoffs.
2. AI Infrastructure as Code (IaC)
- Provision and manage high-performance compute environments (GPU clusters, TPU
pods) using Terraform, Pulumi, or Ansible.
- Define and enforce Policy-as-Code for AI endpoints to ensure compliance with security,
cost-usage limits, and data residency requirements.
- Maintain a consistent environment across Hybrid Infrastructure, ensuring seamless
parity between On-Premises development and Cloud production.
3. Safe Experimentation & Controlled Releases
- Architect Progressive Delivery strategies for AI, including Canary releases, Blue-Green
deployments, and Shadowing (where new models run in parallel with production to
compare outputs).
- Build “Evaluation-in-the-Loop” gates within the pipeline to automatically test for bias,
hallucination, and performance degradation before a release.
- Implement A/B testing frameworks specifically designed for LLM outputs and agentic
behavior.
4. Monitoring & Observability
- Establish deep observability into Inference Endpoints, tracking metrics like tokens-per-
second, latency, and drift in model accuracy.
-Integrate feedback loops that capture production “edge cases” to feed back into the
training and fine-tuning pipelines.
Must-Have Technical Skills:
-Orchestration: Advanced Kubernetes (K8s) skills, specifically with KubeFlow, Ray, or
NVIDIA Triton.
-CI/CD & IaC: Expertise in GitHub Actions/GitLab CI, and Terraform or Pulumi.
- AI Tooling: Experience with Weights & Biases, MLflow, LangSmith, or Arize
Phoenix.
-Hardware: Understanding of GPU virtualization, CUDA drivers, and on-premises
hardware management.
-Security: Familiarity with Open Policy Agent (OPA) and secret management (Vault).
Experience:
- 10+ years in DevOps, SRE, or Cloud Engineering.
- 2+ years of hands-on experience in MLOps or LLMOps, specifically moving LLMs
from notebook to production.
-Proven experience managing Hybrid Cloud environments (e.g., AWS/Azure + Private
Data Center).
Senior AI DevOps / LLMOps • Bielefeld, NW, DE
Als zuverlässiger Partner für Case-Management-Lösungen öffentlicher Verwaltungen wie sozialer Einrichtungen liefern wir einen entscheidenden Beitrag für digitalisierte soziale Dienste.Behörden und ... Mehr anzeigen
Sound made by Sennheiser - Seit mehr als 80 Jahren gehören wir zu den weltweit führenden Herstellern von Audioprodukten und gestalten die Zukunft der Audioindustrie.Wir sind stolz auf unsere ausger... Mehr anzeigen
Solution Architect Embedded Linux / Web (m/w/d) in Bielefeld.Du möchtest als Solution Architect Embedded Linux / Web (m/w/d) Verantwortung übernehmen und deine Erfahrung sichtbar einbringen?.Du kon... Mehr anzeigen
Mach gemeinsam mit ORDIX den nächsten Schritt in deiner Karriere!.Seit 35 Jahren sind wir ein zuverlässiger Partner namhafter Kunden aus dem Finanz- und Bankensektor, der Industrie und dem Handel s... Mehr anzeigen
Sound made by Sennheiser - Seit mehr als 80 Jahren gehören wir zu den weltweit führenden Herstellern von Audioprodukten und gestalten die Zukunft der Audioindustrie.Wir sind stolz auf unsere ausger... Mehr anzeigen
Als zuverlässiger Partner für Case-Management-Lösungen öffentlicher Verwaltungen, sowie sozialer Einrichtungen, liefert die GAUSS-LVS mbH einen entscheidenden Beitrag für digitalisierte Soziale Die... Mehr anzeigen
Mach gemeinsam mit ORDIX den nächsten Schritt in deiner Karriere!.Seit 35 Jahren sind wir ein zuverlässiger Partner namhafter Kunden aus dem Finanz- und Bankensektor, der Industrie und dem Handel s... Mehr anzeigen
AZAV zertifizierter Bildungsträger mit klarem Fokus auf Projektmanagement und Künstliche Intelligenz.Unsere praxisnahen Weiterbildungen bereiten dich gezielt auf den nächsten Karriereschritt vor – ... Mehr anzeigen
Innovationsfreude und Vertrauen in die Fähigkeiten jedes Einzelnen sind die Triebfedern, die ORBIS seit über 40 Jahren erfolgreich im Markt agieren und stetig wachsen lassen.Du möchtest nicht nur P... Mehr anzeigen
Unser Kunde ist ein SAP Platinum Partner mit ca.MitarbeiterInnen im deutschsprachigen Raum.Das Unternehmen wird bei den Kunden für die hohe Expertise im SAP-Umfeld und Pragmatismus geschätzt.Du übe... Mehr anzeigen
Wir sind mutig und innovativ, neugierig und kreativ, bodenständig und ganz klar auf den Erfolg unserer Kunden fokussiert.Unsere Ideen und unser Know-how fließen in einzigartige Maschinen- und Anlag... Mehr anzeigen
Du bist kreativ und neugierig und suchst eine Herausforderung?.Wir suchen die besten Spezialisten mit Spaß an Innovationen und neuen Technologien.Unser Kunde ist ein SAP Platinum Partner mit ca.Mit... Mehr anzeigen
Arbeite an den Ideen von morgen, entwickle die neuesten Technologien und setzte gemeinsam mit Deinem Team neue Maßstäbe im Maschinenbau.Dabei sind wir ein verlässlicher Partner – für Kunden und Mit... Mehr anzeigen
Mach gemeinsam mit ORDIX den nächsten Schritt in deiner Karriere!.Seit 35 Jahren sind wir ein zuverlässiger Partner namhafter Kunden aus dem Finanz- und Bankensektor, der Industrie und dem Handel s... Mehr anzeigen
Innovationsfreude und Vertrauen in die Fähigkeiten jedes Einzelnen sind die Triebfedern, die ORBIS seit über 40 Jahren erfolgreich im Markt agieren und stetig wachsen lassen.Du möchtest nicht nur P... Mehr anzeigen
Mach gemeinsam mit ORDIX den nächsten Schritt in deiner Karriere!.Seit 35 Jahren sind wir ein zuverlässiger Partner namhafter Kunden aus dem Finanz- und Bankensektor, der Industrie und dem Handel s... Mehr anzeigen
Klicken Sie unten auf "Bewerben", um Ihre Bewerbung abzuschicken.Vergewissern Sie sich, dass Ihr Lebenslauf auf dem neuesten Stand ist und dass Sie zuerst die Stellenbeschreibung gelesen haben.Wir ... Mehr anzeigen
Du analysierst mit Vorliebe komplexe Zusammenhänge, verwandelst Daten in wertvolle Erkenntnisse und schaffst so die Grundlage für fundierte Entscheidungen? Dann bist du bei uns genau richtig!.Bei p... Mehr anzeigen
Innovationsfreude und Vertrauen in die Fähigkeiten jedes Einzelnen sind die Triebfedern, die ORBIS seit über 40 Jahren erfolgreich im Markt agieren und stetig wachsen lassen.Du möchtest nicht nur P... Mehr anzeigen
Sound made by Sennheiser - Seit mehr als 80 Jahren gehören wir zu den weltweit führenden Herstellern von Audioprodukten und gestalten die Zukunft der Audioindustrie.Wir sind stolz auf unsere ausger... Mehr anzeigen
