Applied Scientist - LLM, Alexa Conversational Modelling Intelligence

Angewandter Wissenschaftler - LLM, Alexa-Konversationsmodell-Intelligenz (m/w/d)

Als Angewandter Wissenschaftler II in der Alexa-Konversationsmodell-Intelligenz-Team innerhalb von Alexa AI werden Sie die Modellpost-Training für große Sprachmodelle treiben, die Alexa+ antrieben. Sie werden state-of-the-Art-Techniken übernehmen und anpassen, einschließlich supervisierter Feinjustierung, RLHF und Vorzugsoptimierung, und rigorose Experimente durchführen und Erkenntnisse in Produktionsbereitstellung umsetzen, die direkt die Kundenfreundlichkeit für Millionen von Benutzern weltweit verbessern.

Kurzüberblick

• Standort: …
• Arbeitsmodell: …
• Anstellungsart: …

Aufgaben

Kurze Einleitung zu den Aufgaben.

• Entwickeln Sie Bewertungsmethoden und -metriken, diagnostizieren Sie Modellfehler und iterieren Sie an Rezepten, um konkrete Qualität- und Effizienzbenchmarks zu erreichen.
• Entwickeln Sie robuste Bewertungskonzepte, um Modellleistung zu messen, Fehlermodi zu diagnostizieren und Verbesserungen zu quantifizieren.
• Arbeiten Sie eng mit Forschungswissenschaftlern und Ingenieuren zusammen, um Modelle von der Experimentation in die Produktion zu bringen.

Anforderungen

• PhD in Informatik, Maschinellem Lernen, Ingenieurwesen oder verwandten Bereichen
• Kenntnisse in mindestens einer Programmiersprache wie Java, C#, JavaScript, Python, Ruby oder Perl
• Erfahrung bei der Konzeption von Experimenten und statistischer Analyse von Ergebnissen
• Hands-on-Erfahrung bei der Entwicklung, Ausbildung und Bewertung von großen Sprachmodellen

Vorteile

• Gelegenheit, an der Entwicklung von führenden LLM-basierten Konversations-Technologien mitzuarbeiten
• Möglichkeit, die Kundenfreundlichkeit für Millionen von Benutzern weltweit zu verbessern
• Gelegenheit, an der Entwicklung von Bewertungskonzepten und -metriken mitzuarbeiten
• Gelegenheit, an der Entwicklung von robusten Bewertungskonzepten mitzuarbeiten