VEED im Test
Ergebnisse aus einer Testreihe auf einem deutschsprachigen Korpus. Alle Anbieter einer Aufgabe bearbeiten dieselben Fälle nach demselben Protokoll.
Ergebnisse im Überblick
Im ScribeIndex-Test „Untertitel für Videodateien“ (2. Quartal 2026, 40 Videos, je 3 Durchläufe) erreicht VEED 43,9 von 100 Punkten und liegt auf Platz 7 von 8.
| Aufgabe | ScribeIndex-Score | Platz | Hauptkennzahl | Nacharbeit | Getestet |
|---|---|---|---|---|---|
| Untertitel für Videodateien | Mittelfeld: 43,9 | 7 von 8 | Wortfehlerrate: 7,8 % | 39,6 min je Video | 2. Quartal 2026 |
VEED: Untertitel für Videodateien
In der Testreihe „Untertitel für Videodateien“ liegt VEED mit 43,9 Punkten auf Platz 7 von 8, 15,6 Punkte hinter AI-Media (59,5) und 5,0 Punkte vor Kapwing (38,9). Hinter AI-Media bleibt VEED vor allem beim Anteil lesbarer Untertitel (69,3 % gegenüber 81,9 %) und beim Anteil zeitlich passender Untertitel (72,1 % gegenüber 80,0 %) zurück. Vor Kapwing liegt VEED vor allem bei der Wortfehlerrate (7,8 % gegenüber 9,8 %) und beim Anteil zeitlich passender Untertitel (72,1 % gegenüber 69,8 %). Zum einmaligen Abspielen mit Untertiteln kommen nach Schätzung von ScribeIndex im Schnitt 39,6 Minuten Nacharbeit je Video hinzu, bei einer durchschnittlichen Aufnahmedauer von 20,2 Minuten.
Einordnung: Mittelfeld · ScribeIndex-Score 43,9 / 100 · 95-%-Intervall 37,1–49,8 · Platz 7 von 8
4,2 Punkte unter dem Median des Feldes, aber 5,0 Punkte vor dem schwächsten Dienst. Die Schlussgruppe beginnt erst im untersten Fünftel der Punktespanne.
Wortfehlerrate (WER) (Platz 4 von 8): 7,8 % · 95-%-Intervall 6,9–8,8 % · 22.452 Wortfehler von 287.784 Referenzwörtern
Schwächster Wert: 9,8 % · Median (8 Anbieter): 7,9 % · Bester Wert: 6,9 %
Ersetzungen, Auslassungen und Einfügungen je Referenzwort nach Normalisierung.
Nacharbeit je Video (Platz 6 von 8): 39,6 min · 95-%-Intervall 35,3–44,2 min
Schwächster Wert: 43,7 min · Median (8 Anbieter): 37,3 min · Bester Wert: 30,8 min
Geschätzte Nacharbeit bis zur Zielfassung je Video, bei durchschnittlich 20,2 Minuten Aufnahme. Nicht enthalten ist das einmalige Abspielen der Aufnahme mit den Untertiteln, das auch von Hand erstellte Untertitel brauchen. Auf eine Stunde Aufnahme gerechnet sind das 117,4 Minuten.
Verarbeitungszeit (Median) (Platz 4 von 8): 259 s · Niedriger ist besser
Schwächster Wert: 1.211 s · Median (8 Anbieter): 261 s · Bester Wert: 174 s
Gemessen von „Uploadstart“ bis „Vollständiger Export verfügbar“. Platz und Vergleichswerte nur unter Diensten derselben Messstrecke.
Mittlere Zeitabweichung (Platz 5 von 8): 291 ms · 95-%-Intervall 278–305 ms · n = 29.280, Mittelwert
Schwächster Wert: 320 ms · Median (8 Anbieter): 287 ms · Bester Wert: 238 ms
Mittel der absoluten Abweichung der äußeren Start- und Endgrenzen von den zugeordneten Referenzsegmenten, gewichtet je Referenzsegment.
So setzt sich der ScribeIndex-Score zusammen
| Teilwert | Punkte | Gewicht | Beitrag |
|---|---|---|---|
| Inhaltsqualität | 38,6 | 75 % | 29,0 |
| Korrekturaufwand | 49,6 | 20 % | 9,9 |
| Abschlussquote | 100,0 | 5 % | 5,0 |
| ScribeIndex-Score | 100 % | 43,9 |
Die Qualitätsformel besteht zu 50 % aus der Erkennung (100 minus WER) mit 92,2 Punkten, zu 30 % aus dem Timing mit 72,1 Punkten und zu 20 % aus der Lesbarkeit mit 69,3 Punkten. Sie ergibt 81,59 von 100, also 18,41 Punkte weniger als ein fehlerfreies Ergebnis. Bei 30 Punkten Abstand fällt die Inhaltsqualität auf null, hier liegt sie deshalb bei 38,6 von 100 Punkten.
Die Beiträge entstehen aus ungerundeten Teilwerten. Deshalb kann die Summe der angezeigten Werte um 0,1 vom Score abweichen. Bewertungsmodell 2.2. Formel und Skalierung
Testbedingungen
- Korpus: Deutsche Videountertitel
- Fälle: 40 Szenarien × 3 Durchläufe
- Abgeschlossen: 120 von 120 Läufen
- Testweg: Datei-Upload
- Bewertete Ausgabe: Video-Untertitel
- Getestete Version: Web-App, deutsche Videountertitel, Stand 2. Quartal 2026
- Protokoll und Zeitraum: Version 1.0, getestet im 2. Quartal 2026
Alle Kennzahlen
VEED erreicht im Test „Untertitel für Videodateien“ 43,9 von 100 Punkten. Wortfehlerrate (WER) 7,8 % (95-%-Konfidenzintervall 6,9–8,8 %). Getestet wurden 40 Szenarien mit je 3 Durchläufen, 120 von 120 Läufen wurden abgeschlossen. Korpus de-untertitel-v1, Protokoll 1.0, getestet im 2. Quartal 2026.
| Kennzahl | Wert | Zählung und Bedeutung | 95-%-Intervall |
|---|---|---|---|
| ScribeIndex-Score | 43,9 / 100 | Gewichteter Gesamtwert aus Inhaltsqualität, Nacharbeit und Abschlussquote, Bewertungsmodell 2.2. | 37,1–49,8 |
| Wortfehlerrate (WER) | 7,8 % | 22.452 Wortfehler von 287.784 Referenzwörtern. | 6,9–8,8 |
| Nacharbeit je Video | 39,6 min | Erläuterung weiter oben. | 35,3–44,2 |
| Verarbeitungszeit (Median) | 259 s | Erläuterung weiter oben. | – |
| Zeichenfehlerrate · CER | 3,2 % | 59.311 Zeichenabweichungen von 1.860.348 Referenzzeichen. Zeichenabweichungen pro Referenzzeichen nach NFC-Normalisierung, einheitlicher Groß- und Kleinschreibung, entfernten Satzzeichen und zu einem Leerzeichen zusammengefasstem Leerraum. Leerzeichen zählen als Zeichen. | 2,8–3,6 |
| Zeitlich passende Untertitel | 72,1 % | 21.225 zeitlich passend untertitelte Referenzsegmente von 29.448 Referenzsegmenten. Vollständig abgedeckte Referenzsegmente, bei denen der früheste Beginn und das späteste Ende der zugeordneten Untertitel jeweils höchstens 200 ms von der Referenz abweichen. Fehlende Segmente zählen als nicht passend. | 69,2–74,8 (Wilson mit Designeffekt) |
| Lesbare Untertitel | 69,3 % | 20.412 lesbar untertitelte Referenzsegmente von 29.448 Referenzsegmenten. Vollständig abgedeckte Referenzsegmente mit höchstens 2 Zeilen, 42 Zeichen je Zeile und 17 Zeichen je Sekunde in allen zugeordneten Ausgabesegmenten. | 66,9–71,6 (Wilson mit Designeffekt) |
| Mittlere Zeitabweichung | 291 ms | n = 29.280, Mittelwert. Erläuterung weiter oben. | 278–305 |
| Mittlere Lesegeschwindigkeit | 14,5 Zeichen/s | n = 37.537, Mittelwert. Sichtbare Zeichen einschließlich Leerzeichen innerhalb der Zeilen, geteilt durch die jeweilige Standzeit, je ausgegebenem Untertitel, gemittelt über alle ausgegebenen Untertitel. | 13,9–15,2 |
| Mittlere Zeilenlänge | 29,2 Zeichen/Zeile | n = 64.362, Mittelwert. Mittlere Zahl sichtbarer Unicode-Zeichen je ausgegebener Untertitelzeile. | 28,7–29,7 |
| Verarbeitungszeit (95. Perzentil) | 728 s | 95 % der erfolgreichen Läufe waren nach dieser Zeit fertig. | – |
| Abschlussquote | 100,0 % | 120 von 120 gestarteten Läufen abgeschlossen. Anteil der Läufe mit verwertbarem Ergebnis. | – |
Verarbeitungszeit
- Median (p50): 259 s
- 95. Perzentil (p95): 728 s
- Testweg: Datei-Upload
- Messstrecke: Von „Uploadstart“ bis „Vollständiger Export verfügbar“
Über alle abgeschlossenen Läufe. p95 zeigt die Dauer, die 95 % der Läufe nicht überschreiten. Median und p95 beschreiben die Verteilung der Messwerte und sind kein Konfidenzintervall.
Geschätzte Nacharbeit
- Je Video: 39,6 min (Ø 20,2 min Aufnahme)
- Je Stunde Aufnahme: 117,42 min
- 95-%-Intervall je Stunde: 104,76–131,11 min
- Geschätzte Nacharbeit gesamt: 4.746,22 min
- Audiodauer aller Ausgaben: 40 h 25 min (40,420 h)
- Ausgaben: 120, alle abgeschlossenen Läufe
Geschätzt aus den gezählten Fehlern aller abgeschlossenen Ausgaben, mit festen Zeiten je Korrekturschritt, die für alle Dienste gleich sind. Die Rate je Stunde ist die Nacharbeit gesamt ÷ Audiostunden und lässt sich aus den angezeigten Minuten und den Stunden in Klammern genau nachrechnen.
Wortvergleich
WER: Vergleichbar- Wortfehlerrate (WER): 7,8 % · 95-%-Intervall 6,9–8,8 %
- Ersetzungen (S): 11.831
- Auslassungen (D): 6.627
- Einfügungen (I): 3.994
- Referenzwörter (N): 287.784
- Zeichenfehlerrate (CER): 3,2 %
WER wird aus dem zusammengeführten Text der exportierten SRT- oder WebVTT-Datei gegen die normalisierte Referenz berechnet. Zeitmarken und Segmentnummern zählen nicht. WER = (S + D + I) ÷ N × 100, gezählt über alle abgeschlossenen Läufe.
Fehler nach Typ
| Fehlertyp | Anzahl | Anteil am häufigsten Fehlertyp | Bedeutung |
|---|---|---|---|
| Ersetzungen | 11.831 (4,1 % der Referenzwörter) | 100 % | Ein Referenzwort wird durch ein anderes Wort ersetzt (S), etwa „heute“ statt „morgen“. |
| Auslassungen | 6.627 (2,3 % der Referenzwörter) | 56 % | Ein Referenzwort fehlt in der Ausgabe (D), etwa „seit“ statt „seit gestern“. Gezählt werden Wörter, nicht fehlende Inhalte. |
| Einfügungen | 3.994 (1,4 % der Referenzwörter) | 34 % | Die Ausgabe enthält ein Wort, das in der Referenz nicht vorkommt (I). |
Gezählt werden Wörter nach Normalisierung über alle abgeschlossenen Läufe.
Abgeschlossene Läufe: 120 von 120 (100,0 %)
Alle 120 Läufe lieferten ein auswertbares Ergebnis.
Konfiguration im Test
- Produktversion: Web-App, deutsche Videountertitel, Stand 2. Quartal 2026
- Modellversion: Vom Anbieter nicht ausgewiesen
- Sprache: Deutsch (de-DE)
- Vorlage: Keine Dokumentvorlage, nur der Arbeitsauftrag
- Arbeitsauftrag: Untertitel für Videodateien, Version 1.0
- Eigener Wortschatz: Nicht hinterlegt
- Audioeingang: MP4-Dateiupload
- Übersetzung: Nein
- Exportformat: SRT
- Untertitelstil: Standardstil des Editors
- Manuelle Nachkorrektur: Nein
- Auswertung: Version 1.0
- Textnormalisierung: de-subtitle-wer, Version 1.0
- Bewertungsrubrik: Keine, da kein Faktenabgleich
Korpus, Ausschlüsse und Prüfsummen
Vierzig deutschsprachige Videos aus Interview, Tutorial, Vortrag und Reportage. Bewertet werden die exportierten SRT- oder WebVTT-Dateien nach Sprachinhalt, zeitlicher Abdeckung und Lesbarkeit, ohne Übersetzung.
- Korpus: Deutsche Videountertitel (
de-untertitel-v1, Version 1.0) - Szenarien: 40 aufgenommen, 40 ausgewertet, je 3 Läufe
- Audio gesamt: 13 h 28 min, je Fall 3 min bis 59 min (Median 18 min)
- Sprecher je Fall: 1 bis 2
- Videoart: Interview (12), Tutorial (12), Vortrag (10), Reportage (6)
- Aussprache: Standarddeutsch (20), Regional (Deutschland) (8), Österreichisch (6), Schweizerisch gefärbt (6)
- Bildformat: 1920 × 1080, 25 Bilder/s (40)
- Audioformate: H.264 MP4, AAC-LC, 48 kHz, 2 Kanäle
- Referenz: Version 1.0: 95.928 Wörter, 620.116 Zeichen
- Annotierte Einheiten: Referenz-Untertitelsegmente 9.816
- Referenzprüfung: Der Wortlaut entsteht als Sprechvorlage vor der Aufnahme, die Zeitgrenzen erst an der Aufnahme. Nach der Aufnahme wird die Vorlage automatisch mit dem Gesprochenen abgeglichen, abweichende Stellen werden an der Aufnahme geprüft und die Referenz vor den Anbieterdurchläufen eingefroren.
- Zeitraum der Testreihe: 2. und 3. Quartal 2026 für alle Dienste, Korpus vor dem ersten Lauf eingefroren
- SHA-256 Manifest:
a35c5ee698d61b365b97c82257195aeb72edbd47eab9da548608335d37899941 - SHA-256 Referenz:
6ec7f71b2989eb19791326360ba6649b7c8c020915a316303d8763a8f58b2d45
Unsicherheit und Berechnung
- Verfahren: Gepaarter Cluster-Bootstrap, Konfidenzniveau 95 %, Perzentilintervall. Anteile aus Zählern erhalten ein Wilson-Intervall mit Designeffekt
- Cluster: 40 Cluster, Einheit Szenario. Alle Läufe eines Szenarios bleiben im selben Cluster.
- Wiederholungen: 2.000 Bootstrap-Stichproben, Seed 1605653364
- Aggregation: Zähler aller abgeschlossenen Läufe werden gepoolt. Kennzahlen entstehen aus Summen, nicht aus Mittelwerten je Fall.
- Gepaarte Stichprobe: Alle Anbieter dieses Korpus nutzen dieselben Bootstrap-Stichproben. SHA-256 der Ziehungsliste:
22c41832e7f4054b58c4911e41b1b961649b0482f9f511ad72891e68023bafbc - Wörter: WER = (11.831 + 6.627 + 3.994) ÷ 287.784 × 100 = 7,8 %
- ScribeIndex-Score: 95-%-Intervall 37,1–49,8 Punkte, je Bootstrap-Stichprobe aus dem vollständigen Score neu berechnet. Wie das Score-Intervall entsteht
Rangliste Untertitel für Videodateien
Sortiert nach ScribeIndex-Score.
- Platz 1: AI-Media im Test 59,5
- Platz 2: Maestra im Test 55,7
- Platz 3: HappyScribe im Test 52,8
- Platz 4: Amberscript im Test 48,8
- Platz 5: Sonix im Test 47,4
- Platz 6: Clevercast im Test 45,2
- Platz 7: VEED 43,9
- Platz 8: Kapwing im Test 38,9
Daten zu dieser Seite
Maschinenlesbar mit Zählern, Nennern und Intervallen. Frei nutzbar mit Quellenangabe. Zitierweise und Lizenz
So testet ScribeIndex
Jede Testreihe nutzt einen festen deutschsprachigen Korpus mit geprüften, vor dem ersten Lauf eingefrorenen Referenzen. Bewertet wird automatisch nach festen Regeln, unklare Zuordnungen werden anhand der Aufnahme fachlich geprüft. Jeder Fall läuft zwei- bis dreimal. Die Konfidenzintervalle von Score, Hauptkennzahl und weiteren Fehlerraten stammen aus einem gepaarten Bootstrap über die Szenarien, sodass alle Anbieter auf denselben Stichproben verglichen werden. Anteile aus Zählern erhalten ein Wilson-Intervall mit Designeffekt. Der ScribeIndex-Score ist ein gewichteter Gesamtwert aus Inhaltsqualität, Nacharbeit und Abschlussquote. Die Rangliste ordnet nach diesem Punktwert.
Für das Score-Intervall wird in jeder Bootstrap-Stichprobe der vollständige Score mit den Gewichten des Bewertungsmodells neu berechnet. Weil alle Dienste einer Testreihe dieselben Stichproben nutzen, lassen sich auch Scoredifferenzen gepaart auswerten.