Wirkung messbar machen
Wir wollen nicht nur beschreiben, was wir bauen, sondern prüfen, ob es wirkt. Die Wirkungsmessung ist für den Pilot geplant; belastbare Ergebnisse liegen noch nicht vor.
Arbeitshypothesen für den Pilot (Bayern, geplant Q2-Q4 2027) · noch nicht belegt
Grundlage: Wirkungslogik in Anlehnung an das IOOI-Modell, wie es PHINEO im Kursbuch Wirkung beschreibt (Stufen 4-6). Eine Prüfung oder Auszeichnung durch PHINEO liegt nicht vor. Belastbare Daten liegen erst nach dem Pilot vor. Geplante Methode: Pre-/Post-Messung mit einer Kurzskala zur allgemeinen Selbstwirksamkeit (ASKU, drei Items), ohne Kontrollgruppe; Aussagen zu Ursache und Wirkung sind damit nicht möglich. Die Werte sind Arbeitshypothesen und werden mit einem Forschungspartner überprüft. Quelle ASKU: Beierlein, C., Kovaleva, A., Kemper, C. J. & Rammstedt, B. (2014). Allgemeine Selbstwirksamkeit Kurzskala (ASKU). Zusammenstellung sozialwissenschaftlicher Items und Skalen (ZIS). https://doi.org/10.6102/zis35
Warum Wirkungsmessung wichtig ist
Soziale Projekte gibt es viele. Aber nicht jedes wirkt wie erhofft. Wir planen von Beginn an eine ehrliche Messung, weil wir wissen wollen: Lernen die Founder wirklich? Setzen sie um? Verändert sich etwas in ihrem Geschäft?
Drei Dimensionen der Messung
Quantitativ: Zahlen aus dem System
Aus der Plattform sollen im Pilot automatisch Daten fließen. Ausgewertet wird anonymisiert und aggregiert.
- →Erreichte Nutzer:innen: wie viele Founder haben mit der Diagnose begonnen?
- →Modul-Abschluss-Rate: wie viele Prozent der gestarteten Module gehen bis zum Ende?
- →Aktivitäts-Frequenz: wie viele Tage pro Woche kehren Nutzer:innen zurück?
- →KI-Mentor-Nutzung: wie viele Fragen pro Nutzer:in pro Monat?
- →Sprach-Verteilung: welche Sprachen werden tatsächlich genutzt?
- →Selbst-Test-Ergebnisse: vorher/nachher pro Modul
Qualitativ: Stimme der Teilnehmenden
Zahlen alleine sagen nicht, ob etwas tatsächlich hilft. Deshalb fragen wir direkt.
- →Pre-Befragung: Selbst-Einschätzung des Marketing-Wissens am Anfang
- →Mid-Pilot-Befragung nach 6 Wochen (T1) und Abschlussbefragung (T2): Was hat sich verändert? Was wurde umgesetzt?
- →Konkrete Umsetzungs-Beispiele (optionales Feld): was wurde im Geschäft verändert
- →Net Promoter Score (NPS): würden Sie weiterempfehlen?
- →Offene Rückmeldung: was hat gefehlt? Was war zu kompliziert?
Wissenschaftlich: Begleitung (geplant, Partnersuche)
Damit unsere Wirkungsmessung nicht nur von uns kommt, suchen wir einen Forschungspartner für eine wissenschaftliche Begleitung.
- →Forschungsfrage: siehe Abschnitt Forschungspartner
- →Studien-Design: Pre/Post-Messung ohne Kontrollgruppe, damit sind keine Aussagen zu Ursache und Wirkung möglich; eine Vergleichsgruppe müsste mit dem Forschungspartner geklärt werden
- →Publikationen: angestrebt, sofern ein Partner gefunden wird
- →Bachelor-/Masterarbeiten: denkbar für interessierte Studierende
Arbeitshypothesen und Zielwerte für den Pilot
| Kennzahl | Pilot (geplant Q2-Q4 2027) | Anmerkung |
|---|---|---|
| Teilnehmende | 50 bis 200 in Bayern | Umfang hängt von der Finanzierung ab; für Effektaussagen wäre eine Fallzahlplanung mit dem Forschungspartner nötig |
| Modul-Abschlussrate | Zielwert wird nach Pilot-Start festgelegt | Noch keine Datenbasis, wird im Pilot erhoben |
| Selbstwirksamkeit (ASKU) | Zielwert offen | Veränderung T0 zu T2; die Effektgröße wird mit dem Forschungspartner festgelegt, kein Nachweis von Kausalität |
| Weiterempfehlung (NPS) | Arbeitshypothese: über 30 | Noch keine Datenbasis |
| Umsetzungs-Beispiele | Dokumentierte Beispiele aus dem Pilot | Zielanzahl offen |
| Wirkungsbericht | Zwischenbericht und Abschlussbericht zum Pilot | Zeitpunkte abhängig vom Projektstart |
Mögliche Partner und Förderer (Planung)
Soziale Bildungsprojekte brauchen ein Netzwerk. Wir planen drei Bausteine: wissenschaftliche Begleitung, Förderfinanzierung (national und EU) und Multiplikatoren-Reichweite. Die Übersicht zeigt, wen wir ansprechen möchten, nicht wer zugesagt hat. Mit keiner der genannten Stellen besteht derzeit eine Kooperation oder Förderzusage.
Wissenschaftliche Begleitung
1Gesucht wird ein Forschungspartner für eine unabhängige Begleitung der Wirkungsmessung ab Pilot-Start Q2-Q4 2027. Es besteht keine Kooperation und kein Vertrag.
Förder-Partner
2Für Bildung, Integration und Teilhabe kommen mehrere private Stiftungen in Frage. Die Antragsvoraussetzungen, insbesondere zur Gemeinnützigkeit, werden je Stiftung geprüft. Es liegt keine Zusage vor.
Programme auf Landes-, Bundes- und EU-Ebene werden auf Passung und Antragsberechtigung geprüft. Die DigMa Systems UG (haftungsbeschränkt) ist keine gemeinnützige Organisation. Es wurde kein Antrag gestellt, und es gibt keine Zusage.
Multiplikatoren & Reichweite
1Beratungsstellen und Kammern für Menschen mit internationaler Biografie könnten als Verweis- und Reichweitenpartner dienen. Es gibt bisher keine Zusammenarbeit; mögliche Partner werden angesprochen.
Forschungspartner gesucht
Wie wirkt erklärbare KI auf die Selbstwirksamkeit und das Umsetzungsverhalten von Foundern mit internationaler Biografie? Dies ist eine Arbeitsfrage, die mit einem Forschungspartner geschärft werden muss.
Studien-Design, unabhängige Datenauswertung, mögliche Ko-Autorenschaft, Abschlussarbeiten.
Geplant ist ein Pre/Post-Design mit einer validierten Kurzskala zur allgemeinen Selbstwirksamkeit (ASKU, drei Items). ASKU misst allgemeine Selbstwirksamkeit, nicht Gründungs- oder KI-Kompetenz; dafür braucht es weitere Instrumente, die mit dem Forschungspartner ausgewählt werden. Ohne Kontrollgruppe sind keine Aussagen zu Ursache und Wirkung möglich.
Es besteht keine Kooperation und kein Vertrag. Die Partnersuche läuft.
Berichts-Pflichten gegenüber Fördergebern
- ▸Zwischenberichte (Zeitpunkte in Absprache mit dem Fördergeber): laufende Kennzahlen und qualitative Auszüge
- ▸Wirkungsbericht nach Pilot-Ende: Auswertung, mit wissenschaftlicher Begleitung, sofern ein Partner gefunden wird
- ▸Abschlussbericht am Projektende: Lessons Learned und ehrliche Bewertung
- ▸Anonymisierte Roh-Daten auf Wunsch für eigene Analysen, soweit datenschutzrechtlich zulässig
Wir verpflichten uns zur Transparenz: Wenn etwas nicht funktioniert, sagen wir es ehrlich. Lieber ein schlechtes Quartal dokumentieren als ein schönes Ergebnis erfinden.