Horizon-Europe-Antrag: Probe-Evaluierung vor der Einreichung

  • Startseite
  • Blog
  • Horizon-Europe-Antrag: Probe-Evaluierung vor der Einreichung

Das EU Funding & Tenders Portal empfiehlt selbst, die in den Referenzdokumenten des Portals veröffentlichten Standardbewertungsbögen zu verwenden und möglichst vor der Einreichung eine unbeteiligte Person um eine Probe-Evaluierung zu bitten. Die meisten Konsortien führen eine Art Review durch. Deutlich seltener ist eine wirkliche Evaluierung: eine unabhängige Bewertung anhand der Kriterien, die später tatsächlich angewendet werden, mit Schlussfolgerungen, aus denen das Team konkrete Maßnahmen ableiten muss.

Eine Probe-Evaluierung ist keine offizielle Bewertung durch die Europäische Kommission; ihre Punktzahlen sagen nichts über das spätere Ergebnis aus. Ihr Nutzen liegt darin, rechtzeitig sichtbar zu machen, was Fachgutachter erkennen dürften, wenn ihnen ausschließlich der eingereichte Text vorliegt. Korrektorat und formale Prüfung sind separate Aufgaben. Informationen zu den inhaltlichen Prüfungen finden Sie in unseren Prüfschritten zur Antragsreife.

Wurde Ihr Antrag bereits begutachtet und abgelehnt, lesen Sie unseren Leitfaden zur Entscheidung zwischen Überarbeitung, Neuausrichtung und erneuter Einreichung.

Wann ist der richtige Zeitpunkt?

Führen Sie die Probe-Evaluierung durch, sobald ein vollständiger Entwurf vorliegt, einschließlich Wirkungspfad, Arbeitsplantabellen und vorläufigem Budget, aber noch früh genug, um inhaltliche Änderungen vorzunehmen. In der Praxis sind das meist drei bis vier Wochen vor der Einreichungsfrist. Es handelt sich um eine praktische Einschätzung, nicht um eine verbindliche Regel.

Zu früh prüfen die Gutachter lediglich eine Gliederung und benennen Lücken, die dem Team bereits bekannt sind. Zu spät bleiben nur noch kosmetische Korrekturen. Strukturelle Erkenntnisse, etwa eine fehlende Kompetenz oder ein unrealistischer Personalaufwand, lassen sich dann nicht mehr umsetzen. Planen Sie nach dem Review mindestens einen vollständigen Überarbeitungszyklus sowie Zeit für die Freigabe durch die Partner ein.

Fachlich geeignete und unabhängige Gutachter auswählen

Entscheidend ist die Distanz zum Text. Wer an der Antragserstellung beteiligt war, liest mit dem Wissen um die Absichten der Autoren. Genau dieses Wissen haben externe Gutachter nicht.

  • Zwei oder drei Gutachter sind eine praktische Empfehlung und keine Horizon-Europe-Vorgabe. Diese Anzahl orientiert sich grob am offiziellen Verfahren, bei dem mehrere Experten die Anträge zunächst einzeln bewerten und anschließend einen Konsens erarbeiten. Eine Person liefert eine Perspektive; unterschiedliche Einschätzungen sind häufig besonders aufschlussreich.
  • Unterschiedliche Profile einbeziehen. Eine Person mit Fachkompetenz für Excellence, eine mit Erfahrung in Verwertung oder industrieller Anwendung für Impact und eine mit Erfahrung im EU-Projektmanagement für Implementation.
  • Unabhängigkeit vom Autorenteam. Geeignet sind Kolleginnen und Kollegen aus anderen Abteilungen, nicht beteiligte Mitarbeitende einer Partnerorganisation oder externe Gutachter.
  • Vertraulichkeit beachten. Vereinbaren Sie Vertraulichkeitsregeln. Besprechen Sie den Antrag nicht mit Personen, die für denselben Call als offizielle Gutachter tätig werden könnten: Das Portal warnt vor möglichen Interessenkonflikten und Konsequenzen für beide Seiten.

Ein externer Berater, der eine Probe-Evaluierung durchführt, handelt unabhängig von seinem beruflichen Hintergrund nicht als offizieller Gutachter. Seine Kommentare sind fachliche Einschätzungen und kein Hinweis auf das spätere Ergebnis.

Unterlagen und Bewertungskriterien vorbereiten

Die Gutachter sollten genau die Unterlagen erhalten, die auch den offiziellen Experten vorliegen, und nicht mehr:

  • Teil B in der Fassung, die eingereicht werden soll, innerhalb der Seitenbegrenzung. Text jenseits dieser Grenze ist für offizielle Gutachter nicht sichtbar und sollte auch den Probe-Gutachtern nicht vorliegen;
  • die relevanten Angaben aus Teil A, etwa Teilnehmerbeschreibungen, Forschende und die Budgetübersicht;
  • den vollständigen Topic-Text mit Expected Outcomes, Scope und besonderen Bedingungen;
  • den Bewertungsbogen und die Bewertungskriterien des konkreten Calls.

Der letzte Punkt ist entscheidend. Beim Standardbewertungsbogen für Research and Innovation Actions (RIA) und Innovation Actions (IA) werden Excellence, Impact und Implementation mit jeweils 0 bis 5 Punkten bewertet; halbe Punkte sind zulässig. Die Mindestschwelle liegt bei 3 Punkten je Kriterium und insgesamt bei 10 Punkten. Coordination and Support Actions (CSA) berücksichtigen unter denselben Überschriften andere Aspekte. In der ersten Stufe eines zweistufigen Calls werden nur Excellence und Impact bewertet, mit einer Schwelle von jeweils 4 Punkten. Für ERC, EIC, MSCA, Partnerschaftsausschreibungen und einzelne Topics können andere Kriterien, Schwellen oder Gewichtungen gelten. Geben Sie den Gutachtern die Regeln der konkreten Ausschreibung, nicht ein allgemeines Horizon-Europe-Schema.

Briefen Sie die Gutachter so, wie die Kommission ihre Experten instruiert: Bewertet wird der eingereichte Antrag, nicht sein Potenzial nach möglichen Verbesserungen. Schwächen sollen sich in der Bewertung widerspiegeln, statt dass die Gutachter den Text selbst umschreiben.

Excellence, Impact und Implementation bewerten

Bitten Sie die Gutachter, die offiziellen Teilaspekte jedes Kriteriums durchzugehen und vor einer Punktvergabe eine kurze schriftliche Begründung zu formulieren.

Leitfragen:

Kriterium

Fragen an die Gutachter

Excellence

Sind die Ziele klar, messbar und für das Topic relevant? Wird der Fortschritt gegenüber dem Stand der Technik belegt statt nur behauptet? Ist die Methodik tragfähig, einschließlich Open Science und gegebenenfalls der Geschlechterdimension?

Impact

Gibt es einen glaubwürdigen Weg von den Ergebnissen zu den im Topic erwarteten Wirkungen? Sind Zielgruppen und Hürden für die Anwendung konkret benannt? Passen Verbreitung, Verwertung und Kommunikation zu diesen Wirkungspfaden?

Implementation

Führt der Arbeitsplan zu den Zielen? Stimmen Aufwand und Ressourcen mit den Aufgaben überein? Sind die wesentlichen Risiken realistisch bewertet und mit Gegenmaßnahmen versehen? Hat jeder Partner eine sinnvolle Rolle und ausreichende Ressourcen?

Wenn die Gutachter Punkte vergeben, verwenden sie die offizielle Skala und deren Definitionen: „mehrere Schwächen“ bei 3 Punkten und „wenige Schwächen“ bei 4 Punkten. Die Punktzahlen dienen dazu, ein klares Urteil zu erzwingen, nicht das Ergebnis vorherzusagen.

Die Besprechung der Bewertung durchführen

Sammeln Sie zuerst die individuellen Bewertungen ohne Diskussion ein, damit sich die Gutachter nicht gegenseitig beeinflussen. Anschließend folgt eine Konsensbesprechung, moderiert von einer Person, die nicht am Antrag mitgeschrieben hat.

  • Übereinstimmung der Gutachter bei einer Schwäche ist ein starkes Signal; behandeln Sie diese als Priorität.
  • Unterschiedliche Bewertungen deuten häufig darauf hin, dass sich der Text verschieden verstehen lässt. Fragen Sie nach, wie die einzelnen Gutachter ihn interpretiert haben. Oft hilft Präzisierung statt neuer Inhalte.
  • Eine einzelne abweichende Meinung kann richtig sein, insbesondere bei Fachfragen. Dokumentieren Sie den Hinweis, statt ihn durch Abstimmung zu verwerfen.
  • Autoren erläutern, Gutachter begründen. Die Autoren dürfen Rückfragen stellen, aber die Sitzung ist keine Verteidigung des Antrags. Auch ein offizieller Gutachter wird diese zusätzlichen Erklärungen nicht hören.

Aus Kommentaren konkrete Korrekturmaßnahmen mit Zuständigkeiten ableiten

Überführen Sie jeden wesentlichen Kommentar in eine Maßnahme mit einer benannten verantwortlichen Person. Das folgende Beispiel ist illustrativ und bezieht sich auf einen fiktiven Antrag.

Kriterium

Festgestellte Schwäche

Beleg im Entwurf

Vorgeschlagene Korrektur

Verantwortlich

Interne Frist

Excellence

Fortschritt über den Stand der Technik wird behauptet, nicht belegt

Abschnitt 1.1 enthält keinen Vergleichsmaßstab

Mit zwei konkret benannten aktuellen Ansätzen und Zielwerten vergleichen

WP2-Leitung

Tag 5

Impact

Zielgruppen zu allgemein

„Industrie und Gesellschaft“ in 2.1

Nutzersegmente und Entscheidungsträger für die Übernahme benennen

Verwertungsleitung

Tag 7

Impact

Keine Hürde für die Anwendung benannt

Abschnitt 2.1 enthält keinen Absatz zu Hürden

Regulatorische und nutzerbezogene Hürden sowie Gegenmaßnahmen beschreiben

Koordinator

Tag 7

Implementation

Aufwand in WP4 passt nicht zu den Aufgaben

6 Personenmonate für drei Pilotstandorte

Aufwand mit den Pilotpartnern neu kalkulieren und Budget anpassen

WP4-Leitung

Tag 10

Implementation

Abhängigkeit von einer Einzelperson

Nur ein Data Engineer benannt

Zweites Teammitglied in Teil A und WP3 benennen

Partner A

Tag 10

Änderungen bei knapper Frist priorisieren

Wenn die Zeit knapp ist, priorisieren Sie Korrekturen nach ihren Konsequenzen, nicht nach der Anzahl der Kommentare:

  1. Risiken für Mindestschwellen: alles, was nach Auffassung eines Gutachters zur Unterschreitung einer relevanten Bewertungsschwelle führen oder eine Topic-Bedingung betreffen könnte.
  2. Noch lösbare strukturelle Probleme: Aufwand, Ressourcen, Rollen oder Risikomaßnahmen, sofern die Änderungen vor der abschließenden Freigabe durch die Partner umsetzbar sind.
  3. Klarheit und Konsistenz: Widersprüche zwischen Abschnitten, Tabellen und Budget. Sie lassen sich häufig vergleichsweise schnell beheben und fallen Gutachtern auf.
  4. Stil: zuletzt, und nur wenn Zeit bleibt.

Kann ein struktureller Mangel nicht mehr rechtzeitig behoben werden, reduzieren Sie die dadurch nicht belegbare Zusage, statt im Arbeitsplan ein unrealistisches Versprechen stehen zu lassen.

Wann sich ein externes Review lohnt

Eine externe Prüfung ist besonders sinnvoll, wenn niemand innerhalb des Konsortiums den Antrag mit ausreichender Distanz lesen kann, Partner über die Antragsreife uneinig sind, der Koordinator mit dem Programm noch wenig Erfahrung hat oder die Ausschreibung Bewertungskriterien verwendet, mit denen das Team nicht vertraut ist. Das Ergebnis sollte schriftliche Beurteilungen je Kriterium, eine konsolidierte Schwächenliste und einen priorisierten Korrekturplan enthalten. Eine Punktzahl oder Förderung kann damit weder vorhergesagt noch garantiert werden.

Für Organisationen, die externe Unterstützung bei der Antragserstellung und Prüfung erwägen, bietet Nexuswelt Leistungen zur Antragsentwicklung und -unterstützung an. Der konkrete Prüfungsumfang und das Honorar sollten vorab vereinbart werden.

Quellen

Leave A Comment