Senior Research Engineer, LLM Evaluation and Behavioral Analysis
Ist diese Stelle etwas für Sie?
Lebenslauf erstellen Erstellen Sie Ihren Lebenslauf und entdecken Sie Ihre Übereinstimmung mit dieser Stelle — und mit allen anderen.
Bewerbungen unterwegs verfolgen Die kostenlose Whileresume-App für iPhone und Android.
Die Stelle
Build and iterate evaluation frameworks across instruction following, function calling, long-context reasoning, multi-turn dialog, safety, and agentic behaviors.
Develop specialized evaluation suites for function calling, including argument correctness, schema adherence, tool selection, planning, and error recovery.
Design agentic workflows: task decomposition, multi-step planning, self-correction, and autonomous tool-use sequences.
Create CI/CD pipelines for A/B comparisons, regression detection, behavioral drift monitoring, and adversarial probing.
Curate high-quality evaluation datasets with nuanced, challenging cases spanning domains.
Collaborate with researchers and engineers to diagnose failures, triage regressions, and build dashboards that visualize behavior changes across releases.
Develop specialized evaluation suites for function calling, including argument correctness, schema adherence, tool selection, planning, and error recovery.
Design agentic workflows: task decomposition, multi-step planning, self-correction, and autonomous tool-use sequences.
Create CI/CD pipelines for A/B comparisons, regression detection, behavioral drift monitoring, and adversarial probing.
Curate high-quality evaluation datasets with nuanced, challenging cases spanning domains.
Collaborate with researchers and engineers to diagnose failures, triage regressions, and build dashboards that visualize behavior changes across releases.
Die vollständige Anzeige sehen
Aufgaben, Anforderungen, Kompetenzen und Vorteile — mit Ihrem kostenlosen Konto.
oder
Bereits ein Konto?
AnmeldenDiese Stellen könnten Sie interessieren
Noch keine wirklich ähnliche Stelle — hier die neuesten.