Evaluation als empirische Methode ist ein unausgereiftes Modell.

In Valente und Kwans (2013) Arbeit, beschreiben sie das Spektrum von

Evaluationsmglichkeiten in Bezug auf Informationskampagnen. Ausgehend von ihrer theoretischen Grundlage, stellt sich mir die Frage, wie Evaluation in der Praxis zu bewerten ist. Drei Argumente mchte ich anfhren, die meine These bestrken, das Evaluation als empirische Methode in der Praxis noch nicht ausgereift ist. Zum einem lsst sich feststellen, das a) dass jeweilige intendierte Nutzeninteresse einer Evaluation nicht klar ist, sowie b) Kosten-Nutzen nicht immer im Verhltnis stehen und c) Folgehandlungen nicht konsequent damit einher gehen. In umgekehrter Reihenfolge will ich die Argumente diskutieren.

Die theoretische Grundlage (Valente & Kwan, 2013) strukturierte zwar ein Vorgehen der Ablufe einer evaluierenden Erhebung, gibt aber nicht eine Folgehandlung als inhrenter Teil der Methode vor. Somit haben neue Erkenntnisse (z.B. Verbesserungspotential) keinen Anspruch auf Umsetzung. Was das in der Praxis bedeutet, stellte Stamm (2003) in ihrer Studie fest und konstatiert, "dass die Hlfte der erfassten Evaluationen keine direkte Folge verzeichnen kann" (S.197). In Anbetracht knapper ffentlicher Kassen, ist eine derartige Verwertung zweifelsohne kritisch zu betrachten. Eine effektive Kosten-Nutzen Relation sieht beispielsweise Dollase (2011) im Bereich des Bildungswesens in keinem Verhltnis zu einander, die Manahmen gehen an den realen Problemen vorbei und sie spricht von einer Kostenexplosion der kein entsprechender Gewinn gegenbersteht (S.89). Somit fllt man auf die Przision der Ausgangsfrage zurck und muss prfen, ob das Nutzeninteresse der Evaluation weiterhin im Mittelpunkt steht. Bei manchen Studien scheint dieser Punkt nicht klar zu sein, so sah sich die scheidende Familienministerin Schrder mit starker Kritik an ihrer abschlieenden Studie zur Familienpolitik in der BRD konfrontiert. Nach Auffassung der Opposition war die Studie rein als Legitimierung der eigenen Arbeit gedacht (Greive, Hollstein & Leubecher, 2013). Unabhngig davon, diesen Vorwurf in dieser Arbeit klren zu knnen, ist die Evaluation als 'Alibi' kein Einzellfall, wie Stamm (2003) zeigt. Besonders Evaluierungen von Dienstleistungsorganisationen haben sich fr besonders anfllig fr diesen Typus gezeigt.

Resum: Evaluation scheint ein neues In-Wort zu sein, so evaluiert jede Kita bis hin zum Weltkonzern seine Arbeit. Doch ist damit nur etwas gewonnen, wenn auch beabsichtigt wird es als korrigierendes Instrument zu benutzen und aus den Ergebnissen Handlungsempfehlungen folgen zu lassen. Valente & Kwan Abschlusszitat verstehe ich daher als Ausdruck ihres tiefen Idealismuses: "Without evaluation. the utility of implementing public communication Campaigns is subject to debate, criticism, and even ridicule. Disseminating information to foster a more informed and hence more empowered populace represents a significant means to improve the quality of life for all." (2013, S. 95). Dennoch ist auch zu sagen, dass nur weil keine direkten Handlungen auf eine Studie folgen, die Ergebnisse nicht ungenutzt bleiben. Sie gehen oft in Planungen ein, die nicht direkt anschlieen. Auch bedeuten '50% ohne Folgehandlungen', das bei den anderen 50% Handlungen folgten. Eine Besonderheit stellt Schrders Studie zur Familienpolitik dar, da sie 1. den Umstand vereint sich auch dem Vorwurf aus zu setzen, folgenlos geblieben zu sein und 2. mit 13 Mio. eine unglaublich teure Studie gewesen ist und 3. als Alibi fr Schrder gedient haben soll. Somit umfasst interessanter Weise die Kritik an Schrders Studie alle drei meiner Argumente.

Literatur: Dollase, R. (2011). Sinn und Unsinn des Qualittsmanagements: Analyse und Verbesserung. Deutscher Lehrerverband - Fachtagung 2011. Gefunden am 21 November 2013 ber: http://lehrerverband.de/DL_Tagungsdokumentation_2011_Bildungsoekonomie.pdf#p age=83 Greive, M., Hollstein M., & Leubecher M. (2013). 13 Millionen Euro fr Familienstudie ohne Folgen. Gefunden am 21 November 2013 ber: http://www.welt.de/politik/deutschland/article120223408/13-Millionen-Euro-fuerFamilienstudie-ohne-Folgen.html Stamm, M. (2003). Evaluation im Spiegel ihrer Nutzung: Grande ide oder grande illusion des 21. Jahrhunderts?. Zeitschrift fr Evaluation (1/2003). Valente, T. W., Kwan P. (2013). Evaluating Communication Campaigns. Public Communication Campaigns. London: Sage.