Clevercast im Test

Ergebnisse aus 2 Testreihen auf deutschsprachigen Korpora. Alle Anbieter einer Aufgabe bearbeiten dieselben Fälle nach demselben Protokoll.

Stand 20. Oktober 2026 · 11 Quellen im Profil

Ergebnisse im Überblick

Im 3. Quartal 2026 erreicht Clevercast im ScribeIndex-Test „Live-Untertitel“ 64,1 von 100 Punkten (Platz 2 von 6, 30 Veranstaltungen, je 2 Durchläufe) und im Test „Untertitel für Videodateien“ 45,2 Punkte (Platz 6 von 8, 40 Videos, je 3 Durchläufe).

Testreihen von Clevercast
AufgabeScribeIndex-ScorePlatzHauptkennzahlNacharbeitGetestet
Live-UntertitelMittelfeld: 64,12 von 6Wortfehlerrate: 9,8 %87,8 min je Veranstaltung3. Quartal 2026
Untertitel für VideodateienMittelfeld: 45,26 von 8Wortfehlerrate: 9,4 %40,2 min je Video3. Quartal 2026

Clevercast: Live-Untertitel

In der Testreihe „Live-Untertitel“ liegt Clevercast mit 64,1 Punkten auf Platz 2 von 6, 6,9 Punkte hinter AI-Media (71,0) und 1,6 Punkte vor SyncWords (62,5). Hinter AI-Media bleibt Clevercast vor allem bei der Wortfehlerrate (9,8 % gegenüber 7,4 %) und beim Anteil rechtzeitig angezeigter Wörter (89,2 % gegenüber 92,3 %) zurück. Vor SyncWords liegt Clevercast vor allem beim Anteil stabil angezeigter Wörter (90,2 % gegenüber 82,0 %). SyncWords liegt dafür bei der Wortfehlerrate (8,2 % gegenüber 9,8 %) vorn. Zum einmaligen Abspielen mit Untertiteln kommen nach Schätzung von ScribeIndex im Schnitt 87,8 Minuten Nacharbeit je Veranstaltung hinzu, bei einer durchschnittlichen Aufnahmedauer von 35,5 Minuten.

Einordnung: Mittelfeld · ScribeIndex-Score 64,1 / 100 · 95-%-Intervall 61,1–67,0 · Platz 2 von 6

6,9 Punkte hinter dem besten Dienst und 2,4 Punkte über dem Median des Feldes.

Wortfehlerrate (WER) (Platz 6 von 6): 9,8 % · 95-%-Intervall 8,7–10,8 % · 29.185 Wortfehler von 299.308 Referenzwörtern

Schwächster Wert: 9,8 % · Median (6 Anbieter): 8,5 % · Bester Wert: 7,4 %

Ersetzungen, Auslassungen und Einfügungen je Referenzwort nach Normalisierung.

Nacharbeit je Veranstaltung (Platz 2 von 6): 87,8 min · 95-%-Intervall 82,5–93,2 min

Schwächster Wert: 98,9 min · Median (6 Anbieter): 92,4 min · Bester Wert: 82,6 min

Geschätzte Nacharbeit bis zur Zielfassung je Veranstaltung, bei durchschnittlich 35,5 Minuten Aufnahme. Nicht enthalten ist das einmalige Abspielen der Aufnahme mit den Untertiteln, das auch von Hand erstellte Untertitel brauchen. Gemeint ist die Nachbearbeitung der Untertiteldatei, die nach der Übertragung für die Aufzeichnung bleibt. Auf eine Stunde Aufnahme gerechnet sind das 148,6 Minuten.

Zeitversatz (Median) (Geteilter Platz 2 von 6): 1,2 s · Niedriger ist besser

Schwächster Wert: 2,1 s · Median (6 Anbieter): 1,3 s · Bester Wert: 1,1 s

Median des absoluten Abstands zwischen „Wortende im Ton beim Publikum“ und „Erste Anzeige des Wortes in endgültiger Form“. Platz und Vergleichswerte nur unter Diensten derselben Messstrecke.

So setzt sich der ScribeIndex-Score zusammen

Clevercast, Live-Untertitel: Zusammensetzung des ScribeIndex-Scores aus Teilwerten
TeilwertPunkteGewichtBeitrag
Inhaltsqualität66,575 %49,9
Korrekturaufwand46,220 %9,2
Abschlussquote100,05 %5,0
ScribeIndex-Score100 %64,1

Die Qualitätsformel besteht zu 50 % aus der Erkennung (100 minus WER) mit 90,2 Punkten, zu 30 % aus rechtzeitiger Anzeige mit 89,2 Punkten und zu 20 % aus stabiler Anzeige mit 90,2 Punkten. Sie ergibt 89,94 von 100, also 10,06 Punkte weniger als ein fehlerfreies Ergebnis. Bei 30 Punkten Abstand fällt die Inhaltsqualität auf null, hier liegt sie deshalb bei 66,5 von 100 Punkten.

Die Beiträge entstehen aus ungerundeten Teilwerten. Deshalb kann die Summe der angezeigten Werte um 0,1 vom Score abweichen. Bewertungsmodell 2.2. Formel und Skalierung

Testbedingungen

Vollständige Konfiguration

Alle Kennzahlen

Clevercast erreicht im Test „Live-Untertitel“ 64,1 von 100 Punkten. Wortfehlerrate (WER) 9,8 % (95-%-Konfidenzintervall 8,7–10,8 %). Getestet wurden 30 Szenarien mit je 2 Durchläufen, 60 von 60 Läufen wurden abgeschlossen. Korpus de-live-untertitel-v1, Protokoll 1.0, getestet im 3. Quartal 2026.

Clevercast, Live-Untertitel: alle Kennzahlen mit Zählung und 95-%-Konfidenzintervall
KennzahlWertZählung und Bedeutung95-%-Intervall
ScribeIndex-Score64,1 / 100Gewichteter Gesamtwert aus Inhaltsqualität, Nacharbeit und Abschlussquote, Bewertungsmodell 2.2.61,1–67,0
Wortfehlerrate (WER)9,8 %29.185 Wortfehler von 299.308 Referenzwörtern. 8,7–10,8
Nacharbeit je Veranstaltung87,8 minErläuterung weiter oben.82,5–93,2
Zeitversatz (Median)1,2 sErläuterung weiter oben.–
Zeichenfehlerrate · CER4,0 %77.560 Zeichenabweichungen von 1.938.614 Referenzzeichen. Zeichenabweichungen pro Referenzzeichen nach NFC-Normalisierung, einheitlicher Groß- und Kleinschreibung, entfernten Satzzeichen und zu einem Leerzeichen zusammengefasstem Leerraum. Leerzeichen zählen als Zeichen.3,6–4,4
Rechtzeitig angezeigte Wörter89,2 %267.091 rechtzeitig angezeigte Wörter von 299.308 Referenzwörtern. Referenzwörter, deren endgültige Form höchstens 3 Sekunden vor oder nach dem Wortende im Ton beim Publikum erstmals angezeigt wird, pro Referenzwort. Fehlende und falsch erkannte Wörter zählen als nicht rechtzeitig.88,2–90,2 (Wilson mit Designeffekt)
Stabil angezeigte Wörter90,2 %270.044 stabil angezeigte Wörter von 299.308 Referenzwörtern. Referenzwörter, die ab ihrer ersten Anzeige unverändert in endgültiger Form stehen, pro Referenzwort. Vorher anders angezeigte, später umgeschriebene oder entfernte sowie fehlende und falsch erkannte Wörter zählen als nicht stabil.89,1–91,3 (Wilson mit Designeffekt)
Mittlere Übertragungsverzögerung89,0 sn = 299.308, Mittelwert. Mittlere Zeit vom Wortende im Eingangston bis zum Wortende im Ton beim Publikum. Gewichtet wird je Referenzwort. Bei unverzögerter Audioausgabe beträgt sie null.84,2–94,1
Zeitversatz (95. Perzentil)2,1 sBei 95 % der korrekt erkannten Wörter betrug der absolute Zeitversatz höchstens diesen Wert. Verglichen werden „Wortende im Ton beim Publikum“ und „Erste Anzeige des Wortes in endgültiger Form“.–
Abschlussquote100,0 %60 von 60 gestarteten Läufen abgeschlossen. Anteil der Läufe mit verwertbarem Ergebnis.–

Zeitversatz

  • Median (p50): 1,2 s
  • 95. Perzentil (p95): 2,1 s
  • Testweg: Live-Übertragung
  • Messstrecke: Absoluter Abstand zwischen „Wortende im Ton beim Publikum“ und „Erste Anzeige des Wortes in endgültiger Form“

Über alle korrekt erkannten Wörter der abgeschlossenen Läufe, Audio in Echtzeit zugespielt. p95 ist der Zeitversatz, den 95 % dieser Wörter nicht überschreiten, gemessen als absoluter Abstand zum Wortende im Ton beim Publikum. Median und p95 beschreiben die Verteilung der Messwerte und sind kein Konfidenzintervall.

Geschätzte Nacharbeit

  • Je Veranstaltung: 87,8 min (Ø 35,5 min Aufnahme)
  • Je Stunde Aufnahme: 148,57 min
  • 95-%-Intervall je Stunde: 139,56–157,72 min
  • Geschätzte Nacharbeit gesamt: 5.266,96 min
  • Audiodauer aller Ausgaben: 35 h 27 min (35,451 h)
  • Ausgaben: 60, alle abgeschlossenen Läufe

Geschätzt aus den gezählten Fehlern aller abgeschlossenen Ausgaben, mit festen Zeiten je Korrekturschritt, die für alle Dienste gleich sind. Die Rate je Stunde ist die Nacharbeit gesamt ÷ Audiostunden und lässt sich aus den angezeigten Minuten und den Stunden in Klammern genau nachrechnen.

Wortvergleich

WER: Vergleichbar
  • Wortfehlerrate (WER): 9,8 % · 95-%-Intervall 8,7–10,8 %
  • Ersetzungen (S): 14.306
  • Auslassungen (D): 8.282
  • Einfügungen (I): 6.597
  • Referenzwörter (N): 299.308
  • Zeichenfehlerrate (CER): 4,0 %

WER wird aus dem endgültigen Stand der angezeigten Untertitel gegen die normalisierte Referenz berechnet. Zwischenstände der Anzeige gehen in die Stabilität ein, nicht in die WER. WER = (S + D + I) ÷ N × 100, gezählt über alle abgeschlossenen Läufe.

Fehler nach Typ

Gezählte Fehler nach Typ, über alle abgeschlossenen Läufe
FehlertypAnzahlAnteil am häufigsten FehlertypBedeutung
Ersetzungen14.306 (4,8 % der Referenzwörter)100 %Ein Referenzwort wird durch ein anderes Wort ersetzt (S), etwa „heute“ statt „morgen“.
Auslassungen8.282 (2,8 % der Referenzwörter)58 %Ein Referenzwort fehlt in der Ausgabe (D), etwa „seit“ statt „seit gestern“. Gezählt werden Wörter, nicht fehlende Inhalte.
Einfügungen6.597 (2,2 % der Referenzwörter)46 %Die Ausgabe enthält ein Wort, das in der Referenz nicht vorkommt (I).

Gezählt werden Wörter nach Normalisierung über alle abgeschlossenen Läufe.

Abgeschlossene Läufe: 60 von 60 (100,0 %)

Alle 60 Läufe lieferten ein auswertbares Ergebnis.

Konfiguration im Test

  • Produktversion: Clevercast, deutsche Originaluntertitel im gepufferten Live-Webplayer, Stand 3. Quartal 2026
  • Modellversion: Vom Anbieter nicht ausgewiesen
  • Sprache: Deutsch (de-DE)
  • Vorlage: Keine Dokumentvorlage, nur der Arbeitsauftrag
  • Arbeitsauftrag: Live-Untertitel, Version 1.0
  • Eigener Wortschatz: Nicht hinterlegt
  • Übersetzung: Nein
  • Einträge im eigenen Wortschatz: 0
  • Menschliche Live-Korrektur: Nein
  • Erfassung: Ereignisprotokoll der angezeigten Untertitel
  • Audioeingang: Echtzeit-RTMP aus OBS mit virtuellem Audioeingang, 1920 × 1080, 25 Bilder/s
  • Anzeige: Clevercast-Live-Webplayer, deutsche Originaluntertitel
  • Zeitlicher Messbezug: Wortende im hörbaren Playeraudio und erste korrekte Anzeige, absoluter Abstand
  • Exportformat: WebVTT aus der Cloudaufzeichnung
  • Auswertung: Version 1.0
  • Textnormalisierung: de-subtitle-wer, Version 1.0
  • Bewertungsrubrik: Keine, da kein Faktenabgleich

Korpus, Ausschlüsse und Prüfsummen

Dreißig deutschsprachige Aufnahmen aus Vortrag, Webinar, Podiumsdiskussion und Pressekonferenz, in Echtzeit eingespielt. Bewertet werden der endgültige Untertiteltext, nachträgliche Änderungen der Anzeige und der Zeitversatz je Wort zum Ton beim Publikum. Die Übertragungsverzögerung wird separat erfasst und zählt nicht. Übersetzung gehört nicht dazu.

  • Korpus: Deutsche Live-Untertitel (de-live-untertitel-v1, Version 1.0)
  • Szenarien: 30 aufgenommen, 30 ausgewertet, je 2 Läufe
  • Audio gesamt: 17 h 44 min, je Fall 8 min bis 1 h 29 min (Median 29 min)
  • Sprecher je Fall: 1 bis 5
  • Format: Vortrag (10), Webinar (8), Podiumsdiskussion (7), Pressekonferenz (5)
  • Aussprache: Standarddeutsch (16), Regional (Deutschland) (6), Österreichisch (4), Schweizerisch gefärbt (4)
  • Einspielung: Echtzeit über virtuellen Audioeingang (30)
  • Audioformate: PCM 24 Bit (WAV), 48 kHz, mono
  • Aufbereitung:
    • Einspielung der Aufnahme in Echtzeit als Audioquelle der Live-Sitzung über einen virtuellen Audioeingang mit −20 dBFS RMS
  • Referenz: Version 1.0: 149.654 Wörter, 969.307 Zeichen
  • Annotierte Einheiten: Referenzwörter mit Zeitgrenze 149.654
  • Referenzprüfung: Der Wortlaut entsteht als Sprechvorlage vor der Aufnahme, die Zeitgrenzen erst an der Aufnahme. Nach der Aufnahme wird die Vorlage automatisch mit dem Gesprochenen abgeglichen, abweichende Stellen werden an der Aufnahme geprüft und die Referenz vor den Anbieterdurchläufen eingefroren.
  • Zeitraum der Testreihe: 2. und 3. Quartal 2026 für alle Dienste, Korpus vor dem ersten Lauf eingefroren
  • SHA-256 Manifest: 82acc1a0ff5f8f62ab47815747ab1a96383fb705780eb9597c1d3c51a6b044aa
  • SHA-256 Referenz: 12f7090789671983e962a05c01cb6abb03849e6536dc9afde6de15f11454f43b

Unsicherheit und Berechnung

  • Verfahren: Gepaarter Cluster-Bootstrap, Konfidenzniveau 95 %, Perzentilintervall. Anteile aus Zählern erhalten ein Wilson-Intervall mit Designeffekt
  • Cluster: 30 Cluster, Einheit Szenario. Alle Läufe eines Szenarios bleiben im selben Cluster.
  • Wiederholungen: 2.000 Bootstrap-Stichproben, Seed 3355895643
  • Aggregation: Zähler aller abgeschlossenen Läufe werden gepoolt. Kennzahlen entstehen aus Summen, nicht aus Mittelwerten je Fall.
  • Gepaarte Stichprobe: Alle Anbieter dieses Korpus nutzen dieselben Bootstrap-Stichproben. SHA-256 der Ziehungsliste: 0f26e97bd0626cfdf95f5dee7a05315be56e31165714a518399326f79379755a
  • Wörter: WER = (14.306 + 8.282 + 6.597) ÷ 299.308 × 100 = 9,8 %
  • ScribeIndex-Score: 95-%-Intervall 61,1–67,0 Punkte, je Bootstrap-Stichprobe aus dem vollständigen Score neu berechnet. Wie das Score-Intervall entsteht

Rangliste Live-Untertitel

Sortiert nach ScribeIndex-Score.

Zum Kategorievergleich

Clevercast: Untertitel für Videodateien

In der Testreihe „Untertitel für Videodateien“ liegt Clevercast mit 45,2 Punkten auf Platz 6 von 8, 14,3 Punkte hinter AI-Media (59,5) und 1,3 Punkte vor VEED (43,9). Hinter AI-Media bleibt Clevercast vor allem beim Anteil zeitlich passender Untertitel (72,1 % gegenüber 80,0 %) und bei der Wortfehlerrate (9,4 % gegenüber 6,9 %) zurück. Vor VEED liegt Clevercast vor allem beim Anteil lesbarer Untertitel (76,3 % gegenüber 69,3 %). VEED liegt dafür bei der Wortfehlerrate (7,8 % gegenüber 9,4 %) vorn. Zum einmaligen Abspielen mit Untertiteln kommen nach Schätzung von ScribeIndex im Schnitt 40,2 Minuten Nacharbeit je Video hinzu, bei einer durchschnittlichen Aufnahmedauer von 20,2 Minuten.

Einordnung: Mittelfeld · ScribeIndex-Score 45,2 / 100 · 95-%-Intervall 40,7–49,3 · Platz 6 von 8

2,9 Punkte unter dem Median des Feldes und 6,3 Punkte vor dem schwächsten Dienst.

Wortfehlerrate (WER) (Platz 7 von 8): 9,4 % · 95-%-Intervall 8,7–10,3 % · 27.183 Wortfehler von 287.784 Referenzwörtern

Schwächster Wert: 9,8 % · Median (8 Anbieter): 7,9 % · Bester Wert: 6,9 %

Nacharbeit je Video (Platz 7 von 8): 40,2 min · 95-%-Intervall 36,5–44,1 min

Schwächster Wert: 43,7 min · Median (8 Anbieter): 37,3 min · Bester Wert: 30,8 min

Geschätzte Nacharbeit bis zur Zielfassung je Video, bei durchschnittlich 20,2 Minuten Aufnahme. Auf eine Stunde Aufnahme gerechnet sind das 119,3 Minuten.

Verarbeitungszeit (Median) (Platz 2 von 8): 194 s · Niedriger ist besser

Schwächster Wert: 1.211 s · Median (8 Anbieter): 261 s · Bester Wert: 174 s

Gemessen von „Uploadstart“ bis „Vollständiger Export verfügbar“.

Mittlere Zeitabweichung (Platz 7 von 8): 301 ms · 95-%-Intervall 286–317 ms · n = 29.269, Mittelwert

Schwächster Wert: 320 ms · Median (8 Anbieter): 287 ms · Bester Wert: 238 ms

Mittel der absoluten Abweichung der äußeren Start- und Endgrenzen von den zugeordneten Referenzsegmenten, gewichtet je Referenzsegment.

So setzt sich der ScribeIndex-Score zusammen

Clevercast, Untertitel für Videodateien: Zusammensetzung des ScribeIndex-Scores aus Teilwerten
TeilwertPunkteGewichtBeitrag
Inhaltsqualität40,575 %30,4
Korrekturaufwand48,820 %9,8
Abschlussquote100,05 %5,0
ScribeIndex-Score100 %45,2

Die Qualitätsformel besteht zu 50 % aus der Erkennung (100 minus WER) mit 90,6 Punkten, zu 30 % aus dem Timing mit 72,1 Punkten und zu 20 % aus der Lesbarkeit mit 76,3 Punkten. Sie ergibt 82,16 von 100, also 17,84 Punkte weniger als ein fehlerfreies Ergebnis. Bei 30 Punkten Abstand fällt die Inhaltsqualität auf null, hier liegt sie deshalb bei 40,5 von 100 Punkten.

Die Beiträge entstehen aus ungerundeten Teilwerten. Deshalb kann die Summe der angezeigten Werte um 0,1 vom Score abweichen. Bewertungsmodell 2.2. Formel und Skalierung

Testbedingungen

Vollständige Konfiguration

Alle Kennzahlen

Clevercast erreicht im Test „Untertitel für Videodateien“ 45,2 von 100 Punkten. Wortfehlerrate (WER) 9,4 % (95-%-Konfidenzintervall 8,7–10,3 %). Getestet wurden 40 Szenarien mit je 3 Durchläufen, 120 von 120 Läufen wurden abgeschlossen. Korpus de-untertitel-v1, Protokoll 1.0, getestet im 3. Quartal 2026.

Clevercast, Untertitel für Videodateien: alle Kennzahlen mit Zählung und 95-%-Konfidenzintervall
KennzahlWertZählung und Bedeutung95-%-Intervall
ScribeIndex-Score45,2 / 100Gewichteter Gesamtwert aus Inhaltsqualität, Nacharbeit und Abschlussquote, Bewertungsmodell 2.2.40,7–49,3
Wortfehlerrate (WER)9,4 %27.183 Wortfehler von 287.784 Referenzwörtern. 8,7–10,3
Nacharbeit je Video40,2 minErläuterung weiter oben.36,5–44,1
Verarbeitungszeit (Median)194 sErläuterung weiter oben.–
Zeichenfehlerrate · CER3,8 %71.465 Zeichenabweichungen von 1.860.348 Referenzzeichen. 3,6–4,2
Zeitlich passende Untertitel72,1 %21.218 zeitlich passend untertitelte Referenzsegmente von 29.448 Referenzsegmenten. Vollständig abgedeckte Referenzsegmente, bei denen der früheste Beginn und das späteste Ende der zugeordneten Untertitel jeweils höchstens 200 ms von der Referenz abweichen. Fehlende Segmente zählen als nicht passend.69,2–74,8 (Wilson mit Designeffekt)
Lesbare Untertitel76,3 %22.478 lesbar untertitelte Referenzsegmente von 29.448 Referenzsegmenten. Vollständig abgedeckte Referenzsegmente mit höchstens 2 Zeilen, 42 Zeichen je Zeile und 17 Zeichen je Sekunde in allen zugeordneten Ausgabesegmenten.74,1–78,4 (Wilson mit Designeffekt)
Mittlere Zeitabweichung301 msn = 29.269, Mittelwert. Erläuterung weiter oben.286–317
Mittlere Lesegeschwindigkeit14,7 Zeichen/sn = 30.703, Mittelwert. Sichtbare Zeichen einschließlich Leerzeichen innerhalb der Zeilen, geteilt durch die jeweilige Standzeit, je ausgegebenem Untertitel, gemittelt über alle ausgegebenen Untertitel.14,1–15,3
Mittlere Zeilenlänge33,7 Zeichen/Zeilen = 56.217, Mittelwert. Mittlere Zahl sichtbarer Unicode-Zeichen je ausgegebener Untertitelzeile.33,2–34,1
Verarbeitungszeit (95. Perzentil)612 s95 % der erfolgreichen Läufe waren nach dieser Zeit fertig.–
Abschlussquote100,0 %120 von 120 gestarteten Läufen abgeschlossen. –

Verarbeitungszeit

  • Median (p50): 194 s
  • 95. Perzentil (p95): 612 s
  • Testweg: Datei-Upload
  • Messstrecke: Von „Uploadstart“ bis „Vollständiger Export verfügbar“

Über alle abgeschlossenen Läufe. p95 zeigt die Dauer, die 95 % der Läufe nicht überschreiten. Median und p95 beschreiben die Verteilung der Messwerte und sind kein Konfidenzintervall.

Geschätzte Nacharbeit

  • Je Video: 40,2 min (Ø 20,2 min Aufnahme)
  • Je Stunde Aufnahme: 119,26 min
  • 95-%-Intervall je Stunde: 108,51–130,98 min
  • Geschätzte Nacharbeit gesamt: 4.820,60 min
  • Audiodauer aller Ausgaben: 40 h 25 min (40,420 h)
  • Ausgaben: 120, alle abgeschlossenen Läufe

Geschätzt aus den gezählten Fehlern aller abgeschlossenen Ausgaben, mit festen Zeiten je Korrekturschritt, die für alle Dienste gleich sind. Die Rate je Stunde ist die Nacharbeit gesamt ÷ Audiostunden und lässt sich aus den angezeigten Minuten und den Stunden in Klammern genau nachrechnen.

Wortvergleich

WER: Vergleichbar
  • Wortfehlerrate (WER): 9,4 % · 95-%-Intervall 8,7–10,3 %
  • Ersetzungen (S): 14.139
  • Auslassungen (D): 6.890
  • Einfügungen (I): 6.154
  • Referenzwörter (N): 287.784
  • Zeichenfehlerrate (CER): 3,8 %

WER wird aus dem zusammengeführten Text der exportierten SRT- oder WebVTT-Datei gegen die normalisierte Referenz berechnet. Zeitmarken und Segmentnummern zählen nicht. WER = (S + D + I) ÷ N × 100, gezählt über alle abgeschlossenen Läufe.

Fehler nach Typ

Gezählte Fehler nach Typ, über alle abgeschlossenen Läufe
FehlertypAnzahlAnteil am häufigsten FehlertypBedeutung
Ersetzungen14.139 (4,9 % der Referenzwörter)100 %Ein Referenzwort wird durch ein anderes Wort ersetzt (S), etwa „heute“ statt „morgen“.
Auslassungen6.890 (2,4 % der Referenzwörter)49 %Ein Referenzwort fehlt in der Ausgabe (D), etwa „seit“ statt „seit gestern“. Gezählt werden Wörter, nicht fehlende Inhalte.
Einfügungen6.154 (2,1 % der Referenzwörter)44 %Die Ausgabe enthält ein Wort, das in der Referenz nicht vorkommt (I).

Gezählt werden Wörter nach Normalisierung über alle abgeschlossenen Läufe.

Abgeschlossene Läufe: 120 von 120 (100,0 %)

Alle 120 Läufe lieferten ein auswertbares Ergebnis.

Konfiguration im Test

  • Produktversion: Clevercast VoD, deutsche Originaluntertitel, Stand 3. Quartal 2026
  • Modellversion: Vom Anbieter nicht ausgewiesen
  • Sprache: Deutsch (de-DE)
  • Vorlage: Keine Dokumentvorlage, nur der Arbeitsauftrag
  • Arbeitsauftrag: Untertitel für Videodateien, Version 1.0
  • Eigener Wortschatz: Nicht hinterlegt
  • Audioeingang: MP4-Dateiupload in der VoD-Verwaltung
  • Übersetzung: Nein
  • Exportformat: WebVTT
  • Manuelle Nachkorrektur: Nein
  • Einträge im eigenen Wortschatz: 0
  • Auswertung: Version 1.0
  • Textnormalisierung: de-subtitle-wer, Version 1.0
  • Bewertungsrubrik: Keine, da kein Faktenabgleich

Korpus, Ausschlüsse und Prüfsummen

Vierzig deutschsprachige Videos aus Interview, Tutorial, Vortrag und Reportage. Bewertet werden die exportierten SRT- oder WebVTT-Dateien nach Sprachinhalt, zeitlicher Abdeckung und Lesbarkeit, ohne Übersetzung.

  • Korpus: Deutsche Videountertitel (de-untertitel-v1, Version 1.0)
  • Szenarien: 40 aufgenommen, 40 ausgewertet, je 3 Läufe
  • Audio gesamt: 13 h 28 min, je Fall 3 min bis 59 min (Median 18 min)
  • Sprecher je Fall: 1 bis 2
  • Videoart: Interview (12), Tutorial (12), Vortrag (10), Reportage (6)
  • Aussprache: Standarddeutsch (20), Regional (Deutschland) (8), Österreichisch (6), Schweizerisch gefärbt (6)
  • Bildformat: 1920 × 1080, 25 Bilder/s (40)
  • Audioformate: H.264 MP4, AAC-LC, 48 kHz, 2 Kanäle
  • Referenz: Version 1.0: 95.928 Wörter, 620.116 Zeichen
  • Annotierte Einheiten: Referenz-Untertitelsegmente 9.816
  • Referenzprüfung: Der Wortlaut entsteht als Sprechvorlage vor der Aufnahme, die Zeitgrenzen erst an der Aufnahme. Nach der Aufnahme wird die Vorlage automatisch mit dem Gesprochenen abgeglichen, abweichende Stellen werden an der Aufnahme geprüft und die Referenz vor den Anbieterdurchläufen eingefroren.
  • Zeitraum der Testreihe: 2. und 3. Quartal 2026 für alle Dienste, Korpus vor dem ersten Lauf eingefroren
  • SHA-256 Manifest: a35c5ee698d61b365b97c82257195aeb72edbd47eab9da548608335d37899941
  • SHA-256 Referenz: 6ec7f71b2989eb19791326360ba6649b7c8c020915a316303d8763a8f58b2d45

Unsicherheit und Berechnung

  • Verfahren: Gepaarter Cluster-Bootstrap, Konfidenzniveau 95 %, Perzentilintervall. Anteile aus Zählern erhalten ein Wilson-Intervall mit Designeffekt
  • Cluster: 40 Cluster, Einheit Szenario. Alle Läufe eines Szenarios bleiben im selben Cluster.
  • Wiederholungen: 2.000 Bootstrap-Stichproben, Seed 1605653364
  • Aggregation: Zähler aller abgeschlossenen Läufe werden gepoolt. Kennzahlen entstehen aus Summen, nicht aus Mittelwerten je Fall.
  • Gepaarte Stichprobe: Alle Anbieter dieses Korpus nutzen dieselben Bootstrap-Stichproben. SHA-256 der Ziehungsliste: 22c41832e7f4054b58c4911e41b1b961649b0482f9f511ad72891e68023bafbc
  • Wörter: WER = (14.139 + 6.890 + 6.154) ÷ 287.784 × 100 = 9,4 %
  • ScribeIndex-Score: 95-%-Intervall 40,7–49,3 Punkte, je Bootstrap-Stichprobe aus dem vollständigen Score neu berechnet. Wie das Score-Intervall entsteht

Rangliste Untertitel für Videodateien

Sortiert nach ScribeIndex-Score.

Zum Kategorievergleich

Daten zu dieser Seite

Maschinenlesbar mit Zählern, Nennern und Intervallen. Frei nutzbar mit Quellenangabe. Zitierweise und Lizenz

So testet ScribeIndex

Jede Testreihe nutzt einen festen deutschsprachigen Korpus mit geprüften, vor dem ersten Lauf eingefrorenen Referenzen. Bewertet wird automatisch nach festen Regeln, unklare Zuordnungen werden anhand der Aufnahme fachlich geprüft. Jeder Fall läuft zwei- bis dreimal. Die Konfidenzintervalle von Score, Hauptkennzahl und weiteren Fehlerraten stammen aus einem gepaarten Bootstrap über die Szenarien, sodass alle Anbieter auf denselben Stichproben verglichen werden. Anteile aus Zählern erhalten ein Wilson-Intervall mit Designeffekt. Der ScribeIndex-Score ist ein gewichteter Gesamtwert aus Inhaltsqualität, Nacharbeit und Abschlussquote. Die Rangliste ordnet nach diesem Punktwert.

Für das Score-Intervall wird in jeder Bootstrap-Stichprobe der vollständige Score mit den Gewichten des Bewertungsmodells neu berechnet. Weil alle Dienste einer Testreihe dieselben Stichproben nutzen, lassen sich auch Scoredifferenzen gepaart auswerten.