Letterly: KI-Modelle und Technik
Welche Modelle erkennen die Sprache, trennen die Sprecher und erzeugen die Dokumente? Belegte Herstellerangaben und begründete Einschätzungen sind getrennt gekennzeichnet.
Kurzfassung
Letterly nutzt ElevenLabs für die Spracherkennung sowie Gemini und GPT als Sprachmodelle.
Laut Auftragsverarbeitungsvertrag transkribieren Microsoft Azure und ElevenLabs die Aufnahmen, ElevenLabs mit seiner Spracherkennung Scribe und Azure nach Einschätzung von ScribeIndex mit Azure AI Speech. Die Textbearbeitung übernehmen Gemini und Azure. Die Datenschutzerklärung nennt dafür OpenAI, nach Einschätzung von ScribeIndex mit GPT-Modellen über Azure. Die Infrastruktur liegt bei Google Cloud in der EU.
Auf einen Blick
Einordnung: Starke Modelle- Spracherkennung: ElevenLabs · Eigener Modellabgleich: ElevenLabs Scribe
- Dokumenterstellung: Gemini, GPT · Eigener Modellabgleich: Gemini-Familie
Was heißt „Einschätzung“? Wenn der Anbieter die genutzten Modelle nicht benennt, versucht ScribeIndex, diese aus Unterauftragsverarbeiterlisten, technischen Merkmalen oder Veröffentlichungen abzuleiten, jeweils mit Begründung und Quelle bei der Stufe. Solche Modelle bewertet ScribeIndex höchstens mit „Stark“, wie die Methodik erklärt.
Fazit zur Technik
Starke Modelle: Nach Referenzwerten sind die Spracherkennung und das Sprachmodell mindestens so gut wie der Median aktueller Modelle.
Laut Unterauftragsverarbeiterliste setzt Letterly für die Spracherkennung auf ElevenLabs Scribe.
Modelle dieser Familie erreichen im Hugging Face Open ASR Leaderboard, Deutsch (FLEURS und Common Voice) 2,3 % WER. Der Median aller dort gemessenen Modelle liegt bei 4,1 % WER. Weil offen ist, welches Modell dieser Familie Letterly einsetzt, zählt ihr mittlerer Wert. Er liegt nahe am besten gemessenen Modell und ergibt damit „Spitzenklasse“. Ohne genanntes Modell ist höchstens „Stark“ möglich, nach Abzug einer Stufe für belegte Qualitätsprobleme ergibt sich „Solide“. Der Modellabgleich von ScribeIndex ordnet die deutschen Ausgaben ElevenLabs Scribe zu. Nach Einschätzung von ScribeIndex kommt Azure AI Speech hinzu. Darauf stützt sich das Urteil, denn je Verarbeitungsstufe zählt das am besten bewertete Kernmodell.
Für die Dokumenterstellung setzt Letterly auf Google Gemini und die GPT-Familie.
Modelle dieser Familie liegen im Artificial Analysis Intelligence Index zwischen 22 und 53 Punkten. Der Median aller dort gemessenen Modelle liegt bei 30 Punkten. Weil offen ist, welches Modell dieser Familie Letterly einsetzt, zählt ihr mittlerer Wert. Er ist mindestens so gut wie der Median und ergibt damit „Stark“. Deutsche Referenzwerte liegen für diese Familie nicht vor. Der Modellabgleich von ScribeIndex ordnet die deutschen Ausgaben der Gemini-Familie zu.
Damit verarbeiten externe KI-Dienste die Gesprächsinhalte (ElevenLabs, Google, OpenAI und Microsoft). Welche Regionen und Verträge dafür gelten, steht im Datenschutzprofil.
Im ScribeIndex-Test „Allgemeine Diktate“ erreicht Letterly eine Wortfehlerrate von 8,1 %.
Verarbeitungskette
- Audio
- Spracherkennung: Azure AI Speech · Einschätzung, ElevenLabs Scribe · belegt
- Dokumenterstellung: Google Gemini · belegt, GPT-Familie · belegt
- Ergebnis
belegt: Angabe des Herstellers oder eines offiziellen Partners. Einschätzung: abgeleitet aus Unterauftragsverarbeiterlisten, technischen Merkmalen oder Veröffentlichungen
Welches Modell wandelt Sprache in Text um?
Transkription über Azure und ElevenLabs.
Azure AI Speech
Nachweis: Einschätzung · mehrere Indizien (Vom Anbieter nicht bestätigt, abgeleitet aus mehreren Hinweisen)- Anbieter: Microsoft
- Herkunft: Drittanbieter-API
Der Auftragsverarbeitungsvertrag nennt Microsoft Azure für die Transkription. Welchen Azure-Dienst Letterly nutzt, nennt der Vertrag nicht. Für Spracherkennung bietet Microsoft auf Azure den Dienst Azure AI Speech an.
Einstufung: Stark (Im unabhängigen Benchmark mindestens so gut wie der Median aller gemessenen Modelle) · Vermutetes Modell
- Azure AI Speech (Juli 2026) · Eintrag microsoft/azure-speech-07-2026: 1,92 % WER · Spitzenklasse · Hugging Face Open ASR Leaderboard, Deutsch (FLEURS und Common Voice)
- Microsoft MAI-Transcribe-2 · ohne Streaming, Microsoft AI API: 2 % WER · Spitzenklasse · AA Word Error Rate Index
- Microsoft MAI-Transcribe-1.5 · ohne Streaming, Microsoft AI API: 2,4 % WER · Stark · AA Word Error Rate Index
- Microsoft MAI-Transcribe-2 Streaming · Streaming, Microsoft AI API: 2,5 % WER · Spitzenklasse · AA Word Error Rate Streaming Index (Final Transcription)
- Azure LLM Speech · ohne Streaming: 3,7 % WER · Stark · AA Word Error Rate Index
1 weiterer Referenzwert in den Daten zu Letterly (JSON).
Der Einsatz dieses Modells ist nicht vom Hersteller belegt, sondern eine Einschätzung von ScribeIndex. Die Bewertung ist deshalb auf „Stark“ begrenzt, denn die Spitzenklasse setzt ein belegtes Modell voraus.
ElevenLabs Scribe
Nachweis: belegt (Vom Anbieter oder einem offiziellen Partner selbst genannt, samt Einsatzzweck)- Anbieter: ElevenLabs
- Herkunft: Drittanbieter-API
Der Auftragsverarbeitungsvertrag ordnet ElevenLabs der Transkription und Sprachverarbeitung zu. Die Spracherkennung von ElevenLabs heißt Scribe, eine Modellversion nennt Letterly nicht.
Einstufung: Solide (Vor dem Abzug „Stark“. ScribeIndex stuft das Modell um eine Stufe herunter, die Begründung steht unter den Referenzwerten) · Referenz der Modellfamilie
- ElevenLabs Scribe v2 · ohne Streaming, ElevenLabs API: 2,2 % WER · Spitzenklasse · AA Word Error Rate Index
- ElevenLabs Scribe v2 · Eintrag elevenlabs/scribe_v2: 2,25 % WER · Spitzenklasse · Hugging Face Open ASR Leaderboard, Deutsch (FLEURS und Common Voice)
- ElevenLabs Scribe v2 Realtime · Streaming, ElevenLabs API: 3,6 % WER · Stark · AA Word Error Rate Streaming Index (Final Transcription)
Für das eingesetzte Modell gibt es keinen eigenen Referenzwert. Die Werte zeigen die Spannweite der Modelle dieser Familie. Der mittlere Wert der Familie ergibt „Spitzenklasse“, ohne eigenen Referenzwert ist die Bewertung aber auf „Stark“ begrenzt. ScribeIndex stuft ElevenLabs Scribe um eine Stufe herunter. Die deutschen Referenzwerte von ElevenLabs Scribe stammen aus vorgelesenen Einzelsätzen. Vorgelesene Sätze sind natürlich für jedes Modell leichter als freie Gespräche, ausschlaggebend sind hier jedoch die eigenen Tests von ScribeIndex mit deutschen Aufnahmen, in denen ElevenLabs Scribe hinter diesen Werten zurückbleibt.
Modellabgleich im 3. Quartal 2026: Modell zugeordnet. ScribeIndex hat die Ausgaben von Letterly für 105 eigene Prüfeingaben mit den typischen Ausgaben bekannter Spracherkennungsmodelle verglichen. Bei 80 % davon ähneln sie am stärksten ElevenLabs Scribe. Das passt zur Angabe von Letterly. Version und Anpassungen bestimmt der Abgleich nicht. Bei weiteren Prüfeingaben ähneln die Ausgaben am stärksten Azure AI Speech (10 %).
- ElevenLabs Scribe 80 %
- Azure AI Speech 10 %
- Andere Referenzmodelle 10 %
Welches Sprachmodell erstellt Notiz, Bericht oder Zusammenfassung?
Textbearbeitung über Gemini und Azure.
Google Gemini
Nachweis: belegt- Anbieter: Google
- Herkunft: Drittanbieter-API
Der Auftragsverarbeitungsvertrag nennt Google LLC (Gemini) ausdrücklich für die KI-Textverarbeitung.
Einstufung: Stark · Referenz der Modellfamilie
- Gemini 4 Argon · Reasoning-Stufe hoch: 53 Punkte · Spitzenklasse · AA Intelligence Index
- Gemini 3.8 Flash · Reasoning-Stufe hoch: 41 Punkte · Stark · AA Intelligence Index
- Gemini 3.5 Flash · Reasoning-Stufe hoch: 33 Punkte · Stark · AA Intelligence Index
- Gemini 3.1 Pro Preview · Standardeinstellung: 30 Punkte · Stark · AA Intelligence Index
- Gemini 3.5 Flash-Lite · Standardeinstellung: 22 Punkte · Solide · AA Intelligence Index
Für das eingesetzte Modell gibt es keinen eigenen Referenzwert. Die Werte zeigen die Spannweite der Modelle dieser Familie.
GPT-Familie
Nachweis: belegt- Anbieter: OpenAI / Microsoft
- Herkunft: Drittanbieter-API
Die Datenschutzerklärung nennt OpenAI als KI-Dienstleister, der Auftragsverarbeitungsvertrag nennt Azure für die Textverarbeitung. Welche GPT-Modelle laufen, nennt Letterly nicht. Nach Einschätzung von ScribeIndex stellt Microsoft sie über Azure OpenAI bereit.
Einstufung: Stark · Referenz der Modellfamilie
- GPT-6.1 Sol · Reasoning-Stufe maximal: 52 Punkte · Spitzenklasse · AA Intelligence Index
- GPT-5.6 Sol · Reasoning-Stufe maximal: 47 Punkte · Stark · AA Intelligence Index
- GPT-5.6 Terra · Reasoning-Stufe maximal: 42 Punkte · Stark · AA Intelligence Index
- GPT-5.4 · Reasoning-Stufe sehr hoch · Schätzwert von Artificial Analysis: 39 Punkte · Stark · AA Intelligence Index
- GPT-5.5 · Reasoning-Stufe sehr hoch: 38 Punkte · Stark · AA Intelligence Index
4 weitere Referenzwerte in den Daten zu Letterly (JSON).
Für das eingesetzte Modell gibt es keinen eigenen Referenzwert. Die Werte zeigen die Spannweite der Modelle dieser Familie.
Modellabgleich im 3. Quartal 2026: Modell zugeordnet. ScribeIndex hat die Ausgaben von Letterly für 64 eigene Prüfeingaben mit den typischen Ausgaben bekannter Sprachmodelle verglichen. Bei 70 % davon ähneln sie am stärksten der Gemini-Familie. Das passt zur Angabe von Letterly. Version und Anpassungen bestimmt der Abgleich nicht. Bei weiteren Prüfeingaben ähneln die Ausgaben am stärksten der GPT-Familie (20 %).
- Gemini-Familie 70 %
- GPT-Familie 20 %
- Andere Referenzmodelle 9 %
Die Anteile sind einzeln gerundet, ihre Summe kann deshalb um einen Punkt von 100 abweichen. Methode des Modellabgleichs
Wo werden die Daten verarbeitet und gespeichert?
Google Cloud Platform in der EU.
Google Cloud Platform
Nachweis: belegt- Anbieter: Google
Der Auftragsverarbeitungsvertrag bezeichnet Google Cloud Platform mit Standort EU als Cloudinfrastruktur für alle Datenkategorien.
Für Rechenzentren und Hosting gibt es keinen Modellleistungswert. Maßgeblich sind Verarbeitungsort und Datenschutz.
Häufige Fragen
Welches KI-Modell nutzt Letterly?
- Für die Spracherkennung nutzt Letterly Azure AI Speech (Einschätzung) und ElevenLabs Scribe. Der Modellabgleich ordnet die deutschen Ausgaben ElevenLabs Scribe zu.
- Für die Dokumenterstellung nutzt Letterly Google Gemini und die GPT-Familie. Der Modellabgleich ordnet die deutschen Ausgaben der Gemini-Familie zu.
Welches Modell wandelt bei Letterly Sprache in Text um?
- Azure AI Speech, Microsoft, Einschätzung
- ElevenLabs Scribe, ElevenLabs, belegt
Der Modellabgleich ordnet die deutschen Ausgaben ElevenLabs Scribe zu.
Welches Sprachmodell erstellt bei Letterly Notiz, Bericht oder Zusammenfassung?
- Google Gemini, Google, belegt
- GPT-Familie, OpenAI / Microsoft, belegt
Der Modellabgleich ordnet die deutschen Ausgaben der Gemini-Familie zu.
Quellen
Technische Dokumentation, Unterauftragsverarbeiter, Partnerschaften und Veröffentlichungen zu Letterly. Stand 9. Oktober 2026.
- Letterly: Auftragsverarbeitungsvertrag und Unterauftragsverarbeiter letterly.app · abgerufen am 9. Oktober 2026
- Letterly: Datenschutzerklärung letterly.app · abgerufen am 9. Oktober 2026