Evaluationskonzept MISS

Die Projektkonzeption ist auf die Erfassung von Faktoren ausgerichtet, die zur Gestaltung eines übertragbaren Modells benötigt werden. Demgegenüber sind die einzelnen Pilotprojekte auf die lokalen Bedingungen ausgerichtet und aufgebaut. Sie unterscheiden sich im zeitlichen Verlauf, der Gebietsgröße sowie der Anzahl der beteiligten Akteure. Insgesamt können also die lokalen Pilotprojekte als Fallstudien betrachtet werden, die zunächst eine getrennte Evaluation erfordern.

Deshalb erfolgte die Evaluation des gesamten Modellprojekts in zwei Phasen. In der ersten Phaseerfolgt die Evaluation der lokalen Pilotprojekte mittels leitfadengestützter Interviews sowie der Auswertung der (Online-) Fragebögen.

Diese Ergebnisse bildeten die Grundlage für die Gesamtevaluation, bestehend aus dem Vergleich der Pilotprojekte untereinander, dem Vergleich mit Erfahrungen aus Literatur und anderer Projekte sowie dem Evaluations-Workshop. Dort wurden die vorläufigen Ergebnisse vorgestellt und eine abschließende Beurteilung des Modellprojekts vorgenommen. Der Abschluss der Evaluation erfolgt in einem Bericht, in dem die Ergebnisse zusammengefasst und veröffentlicht werden (s. Abbildung).

Die Ergebnisse der Evaluation werden hier nur zusammengefasst wiedergegeben. Eine ausführlichen Analysen der einzelnen Pilotprojekte können im Evaluationsbericht MISS (Größe: ca. 2,1 MB) nachgelesen werden.

Evaluation der lokalen Pilotprojekte

In der ersten Evaluationsphase werden Experteninterviews eingesetzt, um die Erfahrungen und Meinungen der Projektbeteiligten zu erfassen. Die Experteninterviews bieten den Vorteil, dass sie auf die lokale Situation angepasst und den Gesprächen auch nicht standardisierbare Faktoren erfasst werden können. Die Interviews werden in vier Themenkomplexe unterteilt, die sich mit der Erreichbarkeit der Zielgruppe(n), der Auswahl und Aufbereitung der Inhalte, der Auswahl der Kommunikations- und Partizipationsangebote und mit der Perspektive und Verstetigung der gemachten Angebote befassen.

Während die Themenkomplexe bestehen bleiben, können die Fragen an den Interviewten (Koordinator, professioneller Projektbeteiligter, Multiplikator) angepasst werden, so dass eine Beurteilung der Angebote aus Anbieter und Nutzersicht ermöglicht wird. Dabei sind die Themenblöcke stets in einen allgemeinen und in einen projektbezogenen Abschnitt unterteilt. Während der projektbezogene Abschnitt in erster Linie zur Beurteilung des Pilotprojekts beitragen soll, werden in dem allgemeinen Teil Idealvorstellungen abgefragt und Anknüpfungspunkte für die Gesamtevaluation und Eruierung übertragbarer Faktoren gelegt.

Evaluation des Gesamtprojekts

Die Gesamtevaluation des Modellprojekts MISS (Evaluationsphase II) setzte sich aus drei Bestandteilen zusammen. Der erste Schritt ist der Vergleich der Ergebnisse aus den lokalen Pilotprojekten untereinander um festzustellen, welche Strategien erfolgreich waren, welche Rahmenbedingungen begünstigend oder hemmend wirkten und welche Faktoren bei allen Pilotprojekten gleich waren. Die Kernfrage war hier: "Was sind die Kriterien für ein erfolgreiches lokales Projekt?". Diese Ergebnisse werden dann mit den in der Literatur beschriebenen Ergebnissen anderer Projekte verglichen, um eine externe Referenz zu erhalten.

Um die Übertragbarkeit der Ergebnisse zu überprüfen, wurde dann im zweiten Schritt ein kurzer Vergleich mit Erfahrungen aus anderen Partizipationsprojekten sowie der bestehenden Literatur vollzogen. Neben der Übertragbarkeit konnte so auch die Konsistenz der gewonnenen Erkenntnisse geprüft werden.

Im dritten und letzten Schritt wurden die so gewonnenen Erkenntnisse im Evaluationsworkshop den beteiligten Modellstädten vorgestellt und einer abschließenden Bewertung zugeführt. Die Teilergebnisse und die Ergebnisse des Evaluations-Workshops werden dann in dem abschließenden Projektbericht veröffentlicht.

Das Modellprojekt wurde als Versuch angesehen, eine neue Möglichkeit des komplementären Kommunikationskanals Internet zu erproben ohne die anderen Formen ersetzen zu wollen. Deshalb wurden während des Start-Workshops folgende Fragestellungen gesetzt, deren Beantwortung über den Erfolg entscheiden soll:

• Wird das mehrsprachige Angebot angenommen?
• Lohnt sich eine Weiterführung als Regelbestandteil von (wichtigen) Planungsverfahren?

Um auch dem Aspekt der Übertragbarkeit gerecht zu werden, wurden folgende Fragen als Ergänzung zu den oben genannten Anforderungen hinzugefügt:

• Können mehrsprachige Informationen die Betroffenheit und so die Beteiligung von Migranten erhöhen?
• Welche Möglichkeiten zur Ansprache und Aktivierung von Netzwerken der Migranten bzw. Bewohner mit Migrationhintergrund gibt es?
• Wie kann die Zusammenarbeit mit den Integrationsräten und Migrantenselbstorganisationen gestaltet werden?
• Was sind die rechtlichen und organisatorischen Grundlagen mehrsprachiger Internetangebote?

Diese Fragestellungen bilden die Grundlage der abschließenden Bewertung des Modellprojekts. Eine zusammenfassende abschließende Bewertung ist in der Rubrik Evaluation MISS zu finden.