Werkstudent (w/m/d) Conversational AI Testing

1&1 gehört mit über 3.100 Mitarbeitenden und fast 16 Millionen Kundenverträgen zu den führenden Telekommunikationsanbietern in Deutschland. Mit Pioniergeist, ungewöhnlichen Ideen und kreativen Teams haben wir eine führende Marktstellung im Mobilfunk und bei Breitband-Anschlüssen erobert. Durch die Kombination des über 67.000 km langen 1&1 Glasfasernetzes und regionalen Netzen schaffen wir das weitreichendste Glasfasernetz Deutschlands. Außerdem bauen wir das modernste 5G-Netz Europas, auf der Basis der neuartigen Open-RAN-Technologie. Mit offenen Schnittstellen und 5G-Funktionen in einer leistungsfähigen Cloud-Infrastruktur. Dabei stehen unsere Kunden im Mittelpunkt unseres Denkens und Handelns. Für sie schaffen wir Lösungen und Werte, die begeistern. Schreiben Sie die 1&1 Erfolgsgeschichte fort. Innovativ, verlässlich, leidenschaftlich und persönlich erlebbar! Werden Sie Teil von 1&1.

Unser Produktteam entwickelt KI-gestützte Customer-Service-Lösungen für das 1&1 Control-Center. Mit strukturierten Tests und datenbasierten Analysen sorgen Sie dafür, dass unsere Chatbots verständlicher, hilfreicher und zuverlässiger werden. Ihre Erkenntnisse fließen direkt in die kontinuierliche Weiterentwicklung unserer Conversational-AI-Lösungen ein.

• Testen von Chatbot-Dialogen, Prompts und KI-generierten Antworten anhand realistischer Nutzungsszenarien sowie Bewertung der Qualität.
• Entwickeln strukturierter Testfälle und Durchführen funktionaler sowie qualitativer Tests neuer und bestehender Chatbot-Funktionen.
• Analysieren von Qualitäts- und Nutzungskennzahlen in Dashboards zur Identifikation von Stärken, Schwachstellen und Optimierungspotenzialen unserer Conversational-AI-Lösungen.
• Untersuchen von Gesprächsverläufen und Rohdaten, Analysieren des Chatbot-Verhaltens bei unterschiedlichen Nutzereingaben sowie Erkennen wiederkehrender Muster oder Fehlverhalten.
• Durchführen gezielter Deep Dives zu einzelnen Themen, Nutzeranliegen oder Dialogstrecken sowie Validieren der Erkenntnisse durch weitere Tests.
• Dokumentieren von Ergebnissen und Ableiten datenbasierter Empfehlungen für die Weiterentwicklung von Dialogen, Prompts und dem Nutzererlebnis.
• Überprüfen der Wirksamkeit umgesetzter Optimierungen anhand erneuter Tests sowie qualitativer und quantitativer Auswertungen.
• Enge Zusammenarbeit mit Product Ownern, UX, AI Engineering und Entwicklung zur kontinuierlichen Verbesserung unserer Conversational-AI-Produkte.

• Laufendes Studium, z. B. in Human-Computer Interaction, Psychologie, Kognitionswissenschaften, (Computer-)Linguistik, Medieninformatik, Data Science, Wirtschaftsinformatik, Informatik, UX Design oder einer vergleichbaren Fachrichtung.
• Begeisterung für Generative AI, Chatbots und Conversational AI.
• Spaß daran, KI-Lösungen systematisch zu testen, kritisch zu hinterfragen und deren Qualität kontinuierlich zu verbessern.
• Analytisches Denkvermögen sowie Interesse daran, Nutzerverhalten anhand von Daten und Gesprächsverläufen zu verstehen.
• Idealerweise erste Erfahrungen mit Testing, Datenanalyse, Dashboards, User Research, UX oder Conversational AI.
• Strukturierte, sorgfältige Arbeitsweise sowie ein gutes Gespür für Details und Zusammenhänge.
• Fähigkeit, Erkenntnisse verständlich aufzubereiten und konkrete Verbesserungspotenziale abzuleiten.
• Sehr gute Deutschkenntnisse sowie gute Englischkenntnisse.

• Attraktives Gehalt
• Starke Gemeinschaft aus Teamplayern
• Vertrauensarbeitszeit mit flexibler Einteilung und der Möglichkeit, bis zu 40% mobil zu arbeiten
• Zahlreiche Weiterbildungsmöglichkeiten on- und offline
• Rabatte auf 1&1 Produkte und für diverse Freizeitangebote
• Betriebseigenes Restaurant
• Kostenlose Getränke und frisches Obst

KA1SP_DE