remotefruitRemote Deutschland
Senior-Prompt-Engineer
- Arbeitszeit
- Freelance
- Erfahrung
- Erforderlich sind mindestens 4 Jahre Erfahrung als Prompt Engineer und nachgewiesene Erfahrung in der LLM-Optimierung für strikt strukturierte Ausgaben und komplexe Klassifikationen.
- Vergütung
- Gehalt nicht angegeben
Die Rolle in Kürze
Die Rolle verantwortet die technische Migration von Vorlagen zu LLM-basierten Bewertungssystemen mit internen Werkzeugen des Auftraggebers. Sie entwickelt und optimiert Prompts, prüft die Bewertungsqualität anhand menschlicher Referenzbewertungen und dokumentiert die technische Startbereitschaft.
Deine Aufgaben
- Die Rolle steuert den gesamten technischen Migrationsablauf von Vorlagen zu LLM-basierten Bewertungssystemen und nutzt interne Werkzeuge zur Verbesserung der Modellleistung.
- Sie erstellt mit Werkzeugen zur automatischen Prompt-Generierung (APG) Ausgangsprompts für komplexe Eltern-Kind-Vorlagencluster.
- Sie betreibt und überwacht die automatische Prompt-Optimierung (APO), prüft Ergebnisse und meldet Blockaden oder Leistungsplateaus.
- Sie entwirft, testet und verfeinert manuell Prompts für komplexe Vorlagenarchitekturen, problematische Muster und Sonderfälle, insbesondere bei fehlenden oder defekten Werkzeugen.
- Sie überwacht Shadowbot-Durchläufe und stellt sicher, dass ausreichend Abweichungen zwischen menschlichen und LLM-Bewertungen erzeugt, erfasst und nachverfolgt werden.
- Sie testet Prompt-Versionen anhand etablierter Goldstandard-Daten und misst die Qualität der automatischen Bewertungen gegenüber menschlichen Referenzbewertungen mit F1-Werten, Präzision und Recall.
- Sie erstellt technische Begründungen zur Startbereitschaft in Form einer Launch-Zertifizierungsdokumentation.
Das solltest du mitbringen
Erforderlich
- Erforderlich sind Deutschkenntnisse auf muttersprachlichem Niveau und fließende Englischkenntnisse.
- Der Arbeitsstandort muss in Deutschland liegen.
- Erforderlich ist ein Bachelor-, Master- oder Promotionsabschluss in Informatik, Data Science, Computerlinguistik, Mensch-Computer-Interaktion (HCI), Kognitionswissenschaft oder einem verwandten analytischen Fachgebiet.
- Erforderlich sind mindestens 4 Jahre Erfahrung als Prompt Engineer sowie nachgewiesene Erfahrung in der Optimierung großer Sprachmodelle für strikt strukturierte Ausgaben und komplexe Klassifikationsaufgaben. Vertrautheit mit Chain-of-Thought und Few-Shot-Learning wird ebenfalls vorausgesetzt.
- Erforderlich sind ausgeprägte Fähigkeiten im Erkennen von Fehlermustern, in der Analyse der Modellleistung und im Umgang mit SQL oder anderen Datenanalysewerkzeugen.
- Erforderlich ist die Fähigkeit, proprietäre Werkzeuge mit minimaler Anleitung schnell zu erlernen und sicher zu beherrschen.
- Erforderlich sind ausgezeichnete mündliche und schriftliche Kommunikationsfähigkeiten.
Von Vorteil
- Von Vorteil ist Vertrautheit mit LLM-Schnittstellen für den Unternehmenseinsatz wie der Goose API.
- Von Vorteil ist Erfahrung in der Bewertung von KI-Modellen, in Data Science, Computerlinguistik oder Softwareentwicklung.
- Von Vorteil ist praktische Erfahrung mit Systemen zur automatischen Prompt-Optimierung (APO) oder mit Optimierungsabläufen.
- Von Vorteil ist linguistische Expertise einschließlich eines Verständnisses von Semantik und Logik.
So ist Remote hier geregelt
- Der Arbeitsstandort muss in Deutschland liegen.
Veröffentlicht: Datum unbekannt · Quelle geprüft: 17.10.2026.
Die Angaben sind für RemoteFruit einheitlich aufbereitet. Maßgeblich bleibt die Originalanzeige. RemoteFruit steht in keiner Partnerschaft mit dem ausschreibenden Unternehmen.