Praktikant*in für KI-Evaluation für LLM-basierte Systeme im Bereich Daten und KI Research & Development

Beschreibung:

Aufgaben

Die Mercedes-Benz Group AG ist eines der erfolgreichsten Automobilunternehmen der Welt. Mit der Mercedes-Benz AG gehört der Fahrzeughersteller zu den größten Anbietern von Premium- und Luxus-Pkw und Vans.
Teil von Mercedes-Benz zu werden bedeutet den Aufgabenbereich zu finden, in dem Du Deine Talente individuell entfalten kannst. Es bedeutet in einem globalen Automobilunternehmen, dass das Ziel hat die begehrenswertesten Autos der Welt zu bauen, sein Bestes zu geben. Dabei wirst Du von visionären Kolleginnen und Kollegen unterstützt, die ihren Pioniergeist teilen. Together for excellence.
Unser Team Daten & KI für RD (Research & Development) Digitalisierung bei Mercedes-Benz treibt die digitale Transformation in der Forschung und Entwicklung voran. Wir nutzen modernste Technologien und innovative Ansätze, um große Datenmengen zu analysieren und intelligente Lösungen zu entwickeln.
Diese Herausforderungen kommen u. a. auf Dich zu:
LLM Evaluation & Metrics Development:
* Mitentwicklung und wissenschaftliche Fundierung von Evaluationsansätzen für LLM-basierte Agenten auf dem neuesten Stand der Forschung
* Konzeption und Operationalisierung von Qualitätskriterien, die den Anforderungen eines produktiven KI-Einsatzes gerecht werden
* Analyse agentischer Entscheidungsprozesse und Outputs zur Ableitung handhabbarer Qualitätsstandards
Statistische Analyse & Experiment Design:
* Design und Durchführung von Experimenten zur Validierung und Kalibrierung automatisierter Bewertungsverfahren
* Anwendung statistischer Methoden zur Quantifizierung von Reliabilität, Stabilität und Aussagekraft von Evaluationsscores
* Identifikation und Analyse systematischer Verzerrungen in automatisierten Bewertungssystemen
* Ableitung belastbarer, statistisch abgesicherter Schlussfolgerungen aus komplexen Modell- und Systemvergleichen
Data & Pipeline Engineering:
* Konzeption und Implementierung skalierbarer Analyse-Pipelines in Python
* Verarbeitung und strukturierte Auswertung großer Mengen an Evaluationsdaten aus dem R&D-Umfeld
* Integration moderner Frameworks zur Automatisierung und Reproduzierbarkeit des gesamten Evaluationszyklus
Visualisierung & Dokumentation:
* Aufbereitung komplexer Ergebnisse in klare, entscheidungsrelevante Visualisierungen und interaktive Dashboards
* Entwicklung nachvollziehbarer Reports als Grundlage für datengetriebene Modell- und Systementscheidungen
* Aktiver Beitrag zum Aufbau eines unternehmensweiten Qualitätsstandards für KI-Systeme in der Fahrzeugentwicklung
Die Tätigkeit kann ab Juli 2026 beginnen.

Qualifikationen

* Studium der Statistik, Data Science, Psychologie, Sozialwissenschaften oder eines vergleichbaren Studiengangs mit quantitativem Schwerpunkt
* Sichere Deutsch- und Englischkenntnisse in Wort und Schrift
* Fundierte Programmierkenntnisse in Python
* Vertrautheit mit Experiment-Tracking- und Evaluation-Logging-Systemen (z. B. MLflow, Weights & Biases oder vergleichbar) von Vorteil
* Idealerweise praktische Erfahrung in den Bereichen Agentic AI
* Interesse an den Grundlagen und Grenzen moderner KI-Systeme
* Engagement und Teamfähigkeit
* Begeisterung für innovative Technologien und die Bereitschaft, sich eigenständig in neue Themengebiete einzuarbeiten
* Analytische, strukturierte Denkweise mit dem Anspruch, Ergebnisse nicht nur zu berechnen, sondern zu durchdringen
Zusätzliche Informationen:
Wir freuen uns auf Deine Online-Bewerbung mit Lebenslauf, Anschreiben, Zeugnissen, aktueller Immatrikulationsbescheinigung mit Angabe des Fachsemesters, ggf. Pflichtpraktikumsnachweis und Nachweis über die Regelstudienzeit. Bitte vergiss nicht im Online-Formular Deine Dokumente als "relevant für diese Bewerbung" zu markieren und beachten die maximale Dateigröße von 5 MB.
Weiterführende Informationen zu den Einstellkriterien findest Du hier.
Schwerbehinderte und gleichgestellte Bewerbende sind herzlich willkommen! Die Schwerbehindertenvertretung (sbv-sindelfingen@mercedes-benz.com) unterstützt Dich gerne im Bewerbungsprozess.
HR Services hilft Dir bei Fragen zum Bewerbungsprozess gerne weiter. Du erreichst uns per E-Mail über myhrservice@mercedes-benz.com oder telefonisch unter 0711/17-99000 (Mo-Fr 10-12 Uhr & 13-15 Uhr)