Gebaut für verantwortungsvolle Evidenzsynthese

Zitations-Integritäts-Benchmark

Wir verifizieren jeden in echten AutoSearch-Deliverables zitierten DOI erneut gegen Crossref / doi.org — mit einem unabhängigen, wiederholbaren Harness (scripts/benchmark_citations.py). Die Ergebnisse werden wie gemessen publiziert, Fehlschläge eingeschlossen.

Benchmark erstellt: 2026-06-10 · Methodik v1.0.0, Modus: live. Der Harness ist deterministisch und jederzeit auf denselben Artefakten wiederholbar. /methodology

Kontext: der Vergleich mit generalistischen Tools

Unabhängige Evaluationen berichten, dass generalistische Deep-Research-Systeme 3–18 % ihrer URL-Zitationen halluzinieren (arXiv:2604.03173). AutoSearch zielt per Konstruktion auf null fabrizierte DOIs: Eine Zitation löst entweder vor Aufnahme ins Deliverable zu einem echten Datensatz auf oder wird markiert und ausgeschlossen.

RAISE-Empfehlungen — wie AutoSearch antwortet

RAISE (Responsible AI in Evidence Synthesis, 2025) fordert von Tool-Entwicklern klare Dokumentation, Transparenz über Grenzen und Verzerrungen sowie Belege, dass das Tool tut, was es behauptet. So mappt jede Erwartung auf ein ausgeliefertes AutoSearch-Feature: (cochrane.org)

• Klare Dokumentation der Tool-Funktion → Öffentliche Methodik-Seite plus Methods-Abschnitt in jedem Report mit abgefragten Quellen, Suchstrings und Trefferzahlen
• Transparenz über Grenzen und mögliche Verzerrungen → Jedes Manuskript enthält einen Limitations-Abschnitt; Preprints und schwache bibliografische Metadaten werden markiert, nie stillschweigend aufgewertet
• Belege, dass das Tool tut, was es behauptet → Publizierter Zitations-Integritäts-Benchmark, auf echten Deliverables mit offenem, deterministischem Harness wiederholt — Fehlschläge eingeschlossen
• Menschliche Aufsicht über KI-gestützte Synthese → Deliverables sind Entwürfe für Expertenreview: Einschlussentscheidungen, Interpretation und Freigabe bleiben beim menschlichen Autor
• Transparentes Reporting der KI-Nutzung → Zu jedem Manuskript wird ein einfügefertiges AI Use Statement erzeugt: Tool, Version, verwendete Modelle und der genaue Umfang der KI-Arbeit
• Reproduzierbare, auditierbare Methoden → Reproducibility Statement (exakte Query, Keywords, Quellen, Daten, Engine-Version, Run-ID), PRISMA-2020-Fluss mit echten Zahlen und Export eines Screening-Logs auf Datensatzebene
• Verifizierbare Ergebnisse → Live-DOI-Verifikation gegen Crossref, bevor eine Zitation in den Report gelangt, plus semantische Verifikation der Zitations-Claim-Verknüpfung

Das gemeinsame Positionspapier 2025 (Cochrane, Campbell, JBI, CEE)

Das gemeinsame Positionspapier zur verantwortungsvollen KI-Nutzung in der Evidenzsynthese erwartet menschliche Aufsicht, transparentes Reporting und Begründung der KI-Nutzung. So richtet sich AutoSearch danach aus:

• Menschliche Aufsicht — AutoSearch-Output ist Entscheidungsunterstützung für einen menschlichen Autor, kein fertiges Urteil. Der Autor prüft das Deliverable, trifft die Einschlussentscheidungen und bleibt für die Synthese verantwortlich.
• Transparentes Reporting — jedes Manuskript enthält ein AI Use Statement mit System, Version, Modellen und der Angabe, welche Schritte KI-gestützt waren (Suche, Screening, Extraktion, Entwurf) und welche menschlich (Review, Einschlussentscheidungen, Freigabe).
• Begründung und methodische Solidität — der publizierte Benchmark, der PRISMA-2020-Fluss mit echten Zahlen und das Reproducibility Statement geben Autoren die Belege, um den Tool-Einsatz im eigenen Methodenteil zu begründen.

Datenresidenz und DSGVO

AutoSearch läuft auf britischer und Schweizer Infrastruktur mit DSGVO- und nDSG-konformer Verarbeitung. Ihre Uploads werden nicht zum Training von Modellen verwendet. Einzelne KI-Verarbeitungen können externe Modellanbieter mit geeigneten Garantien wie Standardvertragsklauseln einbeziehen — die Datenschutzrichtlinie dokumentiert Prozessoren und internationale Transfers vollständig. /privacy

Häufige Fragen

Ist AutoSearch von Cochrane oder RAISE empfohlen?

Nein. Es gibt keine Cochrane- oder RAISE-Zertifizierung für KI-Tools, und wir beanspruchen keine. AutoSearch richtet sich an den öffentlichen RAISE-Empfehlungen und dem gemeinsamen Positionspapier 2025 aus; diese Seite dokumentiert das Mapping Feature für Feature.

Wie verhindern Sie fabrizierte Zitationen?

Jeder DOI wird vor Aufnahme in den Report live gegen die Crossref-API verifiziert; eine nicht auflösbare Zitation wird markiert und ausgeschlossen. Zusätzlich publizieren wir einen unabhängigen Benchmark, der die DOIs echter Deliverables erneut prüft — Fehlschläge eingeschlossen.

Was macht die KI, und was bleibt menschlich?

Die KI führt die Suche aus, sichtet und filtert Datensätze, extrahiert Evidenz und entwirft das Manuskript. Der menschliche Autor prüft das Deliverable, trifft die finalen Einschluss- und Interpretationsentscheidungen und gibt frei. Jedes Manuskript enthält ein AI Use Statement, das dies festhält.

Unabhängigkeits-Hinweis

AutoSearch ist nicht von Cochrane, Campbell, JBI, CEE oder den RAISE-Autoren zertifiziert, empfohlen oder mit ihnen verbunden. Eine solche Zertifizierung für KI-Tools existiert heute nicht. Wir richten das Produkt an deren publizierten Empfehlungen aus und verlinken die Originale, damit das Mapping überprüfbar bleibt.