Forschungsprojekt

Reporting-Checklisten für veterinärmedizinische Manuskripte, mit Belegstelle im Text.

VetCaseAudit ist ein Forschungsprojekt. Veterinärmedizinische Manuskripte werden gegen Reporting-Checklisten geprüft. Jeder Befund trägt ein Zitat aus dem Text. Zitate, die im Text nicht wiedergefunden werden, erscheinen als ungeprüft.

Die laufende Instanz nutzen wir intern. Das ist kein kommerzielles Angebot.
Berichtskopf der Anwendung: ein Compliance-Score in Prozent, das zugehörige Bewertungsband und die Zahl der bewerteten Checklistenpunkte.
Berichtsansicht der Anwendung. Demonstrationsdaten, kein reales Manuskript. Die Anwendung ist derzeit englischsprachig.

In vier Schritten

Vom Manuskript zum belegten Bericht

  1. Hochladen PDF mit Textebene oder DOCX. Reine Scan-PDFs ohne Textebene werden mit einer konkreten Fehlermeldung abgelehnt, statt eine leere Analyse zu erzeugen.
  2. Checkliste wählen Jede Analyse wird an eine veröffentlichte, unveränderliche Checklistenversion gebunden.
  3. Prüfen lassen Der Text wird in überlappende Abschnitte zerlegt, jeder Abschnitt gegen jeden Checklistenpunkt geprüft und die Teilergebnisse deterministisch zusammengeführt.
  4. Bericht lesen Je Punkt ein Urteil mit Belegzitat, Seitenbezug und einem konkreten Verbesserungshinweis. Export als PDF und als JSON.
  • Erfülltzählt 1
  • Teilweise erfülltzählt 0,5
  • Fehlendzählt 0
  • Nicht anwendbarfällt aus dem Nenner

Warum die Befunde belastbar sind

Drei Regeln, die nicht verhandelbar sind

Zitate werden serverseitig geprüft

Kein Sprachmodell sagt uns, wo ein Zitat steht. Die Zeichenpositionen werden im extrahierten Manuskripttext nachgeschlagen. Ein Zitat, das dort nicht vorkommt, erscheint im Bericht als ungeprüft.

Wie geprüft wird

Ein fehlgeschlagener Abschnitt scheitert sichtbar

Bricht ein Teilabschnitt der Analyse ab, scheitert die gesamte Analyse. Kein Punkt wird im Hintergrund als „fehlend“ gewertet. Das würde die Bewertung nach unten verfälschen, ohne dass es jemand bemerkt.

Wie geprüft wird

Veröffentlichte Checklistenversionen sind unveränderlich

Jede Analyse bleibt an genau die Version gebunden, gegen die sie gelaufen ist. Ein späteres Update der Checkliste verändert einen einmal erstellten Bericht nicht rückwirkend.

Wie geprüft wird
Compliance-Map: ein Raster aus farbigen Feldern, je Checklistenpunkt eines, in Grün für erfüllt, Amber für teilweise erfüllt, Rot für fehlend und Grau für nicht anwendbar.
Die Compliance-Map ist zugleich die Navigation. Ein Klick springt zum Befund. Oberer Ausschnitt, Demonstrationsdaten.
Ein aufgeklappter Befund mit Urteil, wörtlichem Belegzitat aus dem Manuskript und einer Kennzeichnung, ob das Zitat im Text wiedergefunden wurde.
Jeder Befund trägt sein Belegzitat und die Angabe, ob es im Text wiedergefunden wurde. Demonstrationsdaten.

Die Checklisten

Vier Checklisten, versionierte Daten statt fest verdrahteter Logik

STROBE-Vet

51 Punkte · Beobachtungsstudien

Kohorten-, Fall-Kontroll- und Querschnittsstudien.

Vet-CASE Core

51 Punkte · Fallberichte und Fallserien

Eigenentwicklung für VetCaseAudit.

NEURO-5D

41 Punkte · Neurologische Fallberichte

Aufgebaut nach dem „5 Fingers“-Schema. Der Itemtext ist unserer.

ARRIVE 2.0

38 Punkte · In-vivo-Tierversuche

Gegliedert in „Essential 10“ und „Recommended Set“.

Alle vier Checklisten im Detail

Wo Ihre Manuskripte verarbeitet werden

Verarbeitung bei der GWDG, mit dem Schlüssel Ihrer Einrichtung

Für die Analyse wird der Manuskripttext an einen Sprachmodell-Anbieter übertragen. Derzeit ist das ausschließlich die akademische Infrastruktur der GWDG in Göttingen. Wer die Anwendung nutzt, hinterlegt den eigenen Zugangsschlüssel. Die Nutzungsbeziehung zum Anbieter besteht zwischen der nutzenden Organisation und der GWDG.

Datenfluss, Speicherung und Löschung

Grenzen

Was VetCaseAudit nicht tut

  • Es ersetzt kein Peer Review und trifft keine fachliche, methodische oder tierärztliche Beurteilung. Es prüft, ob etwas berichtet ist, nicht ob es richtig ist.
  • Die Urteile im Bericht sind KI-generiert und können falsch sein. Sie sind eine Arbeitsgrundlage, die von Autorinnen und Autoren geprüft wird. Die Belegzitate existieren deshalb.
  • Es ist kein Plagiatsprüfer, kein Statistikprüfer und kein Massen-Screening-Werkzeug.
  • Es sagt keine Annahme durch eine Zeitschrift voraus und verspricht kein Publikationsergebnis.

Anmelden

Wenn Sie bereits ein Konto haben, können Sie sich in der Anwendung anmelden. Wie die Prüfung abläuft, steht unter Methode.