Medizinische Spracherkennung im Vergleich

• ScribeIndex-Score: 0 bis 100 Punkte. Je höher der ScribeIndex-Score, desto näher kommt die Ausgabe dem Ziel der Testreihe.
• Fakten-F1: Präzision und Vollständigkeit der dokumentierten Fakten, höher ist besser. Darunter das 95-%-Konfidenzintervall.
• Ausgabeart: „Wortnah“ heißt, der Text folgt dem gesprochenen Wortlaut. „KI-überarbeitet“ heißt, ein Sprachmodell überarbeitet den erkannten Text sprachlich. Beide Arten prüft ScribeIndex an denselben klinischen Fakten.
• Nacharbeit je Diktat: Zeit bis zur Zielfassung, geschätzt aus den gezählten Fehlern. Die Zielfassung ist für alle Dienste dieselbe. Die Aufnahmen dauern im Schnitt 5,0 Minuten. Nicht enthalten ist das einmalige Durchlesen, das auch ein von Hand getipptes Dokument braucht.
• Schwerwiegende Fehler: Anteil der Ausgaben mit schwerwiegendem Fehler, darunter die Zahl der betroffenen Ausgaben.
• Speicher- und Verarbeitungsort: „EU verfügbar“: Eine reine EU-Region ist möglich, prüfen Sie die eingestellte Region Ihres Kontos. „teils ohne Angabe“: Für einzelne Verarbeitungsschritte nennt der Anbieter keinen Ort.
• Preis: Herstellerangaben. Abonnements stehen als Monatswert, Verbrauchspreise je Einheit, jeweils mit Abrechnung und Steuerbasis, soweit der Anbieter sie nennt.

Je Zeile ist der beste Wert fett markiert, beim ScribeIndex-Score nur ohne Gleichstand.

Die Verarbeitungszeiten sind bei gleichen Start- und Endpunkten vergleichbar. Gemessen wurde beim Datei-Upload von „Uploadstart“ bis „Vollständig verfügbares, exportierbares Ergebnis“, beim Live-Diktat von „Ende des letzten zugespielten Wortes“ bis „Stabile nutzbare Textausgabe“.

Tippiti, Heidi, Idana Flow und HealthJet liefern eine KI-überarbeitete Ausgabe. Die WER misst dort nur den Abstand zur wörtlichen Referenz. Die Inhaltsqualität im ScribeIndex-Score beruht bei allen Diensten auf Fakten-F1, nicht auf der WER. Bei KI-überarbeiteter Ausgabe zeigen die Erkennungsfehler, wie viele Wörter falsch erkannt oder inhaltlich verändert sind. Zulässige Umformulierungen zählen dort nicht. Bei wortnaher Ausgabe zählt jede Abweichung vom Wortlaut, die Erkennungsfehler entsprechen dort der WER. Die Messwerttabelle vergleicht WER, CER und Erkennungsfehler deshalb nur innerhalb derselben Ausgabeart.

Idana Flow erzeugt den Text nur über eine feste Vorlage des Herstellers. Die übrigen Dienste liefern den Text ohne Dokumentvorlage, nur nach dem Arbeitsauftrag.

Schwerwiegende Fehler bilden im ScribeIndex-Score einen eigenen Teilwert mit 20 % Gewicht. Ein Dienst ohne schwerwiegenden Fehler kann deshalb vor Diensten mit besseren Einzelkennzahlen liegen.

Die Anteile umgesetzter Diktatbefehle, Selbstkorrekturen und Bearbeitungsanweisungen stehen als eigene Kennzahlen und gehen selbst nicht in den ScribeIndex-Score ein. Eine nicht umgesetzte Anweisung zählt über ihre Folgen im Dokument. Sie kostet Nacharbeit, und eine dadurch falsche oder fehlende Angabe senkt das Fakten-F1. Bleibt eine Änderung oder Ergänzung an einer Angabe, bei der ein Fehler schwerwiegend sein kann, stillschweigend aus, zählt das nach der Rubrik als möglicher schwerwiegender Fehler. Bleibt ein Diktatbefehl als Wort im Text stehen, zählt er zusätzlich als Einfügung in der WER, die hier nicht in den ScribeIndex-Score eingeht.

Bei seltenen schwerwiegenden Fehlern reicht das Score-Intervall vor allem nach unten, wie die Methodik zum Score-Intervall erklärt.

• Messwerte verstehen: Word Error Rate erklärt: WER, CER und echte Aussagekraft Die Word Error Rate (WER) misst Wortabweichungen zwischen Transkript und Referenz. Sie eignet sich für den Vergleich von Spracherkennung unter identischen Regeln. Ob ein zusammenfassendes Dokument inhaltlich stimmt, misst sie nicht.
• Den richtigen Arbeitsablauf wählen: Medical Scribe oder Transkription: Was ist der Unterschied? Transkription überträgt Gesprochenes in Text. Ein Medical Scribe erstellt daraus einen strukturierten Dokumentationsentwurf. Die Wahl hängt davon ab, welcher Arbeitsschritt automatisiert werden soll und wie das Ergebnis geprüft wird.
• Recht und Datenschutz: Rechtsrahmen für KI-Scribes und Spracherkennung in Praxen KI-Scribes verarbeiten Gesundheitsdaten und Berufsgeheimnisse. Zu den Voraussetzungen gehören Auftragsverarbeitungsvertrag, Geheimhaltungsverpflichtung, Einverständnis zur Tonaufnahme, Cloud-Nachweise nach § 393 SGB V und die fachliche Prüfung jedes Akteneintrags.
• Verträge und Datenflüsse prüfen: Datenschutz bei KI-Scribes: Die konkrete Prüfcheckliste Ein Speicherort oder ein Zertifikat beantwortet nicht alle Datenschutzfragen. Die Checkliste zeigt, was Sie vor dem Einsatz eines KI-Scribes klären müssen, von Datenflüssen und Rollen über Auftragsverarbeitung und Unterauftragsverarbeiter bis zu Löschfristen und Trainingsregeln.