Schlagwort: Evaluationsforschung

Abfall aus der Rechtswirkungsforschung: Zur Verselbständigung der Evaluationsforschung und ihrer neuen Konkurrenz

Posted on by Klaus F. Röhl

Demnächst soll ich einen Vortrag über »Wirkungsforschung in der Rechtssoziologie« halten. Bei der Vorbereitung fallen allerhand Notizen an, für die in einem Vortrag von 45 Minuten oder einem Manuskript von 15 Seiten kein Platz ist, sozusagen Vortragsabfall. Den deponiere ich in Rsozblog. Heute also Notizen zur Evaluationsforschung.

Die Wirkungsforschung ex post läuft unter dem Namen Evaluation oder Evaluierung. Als Begleit-, Kontroll- und Effektivitätsforschung passt Ex-post-Evaluation auch in die Rechtssoziologie.[1] Aber Evaluationsforschung hat sich verselbständigt und möchte in einer anderen Liga spielen. Von der schlichten Wirkungsforschung ex post hat sich die Evaluationsforschung als Gewissen der Politik abgesetzt. Die Absetzbewegung lässt sich an zehn Punkten festmachen.

  1. Es lassen sich große Anstrengungen beobachten, um die Evaluationsforschung zu einer eigenständigen Disziplin mit unnachahmlicher Expertise aufzubauen. Durch Literatur, eigene Zeitschriften und Organisationen sowie eine zahlungskräftige Klientel hat die Evaluationsforschung den Status einer Profession erreicht. Sie nimmt für sich »evaluationsfachliche Expertise«[2] in Anspruch, die »Wissenschaft zur praktischen Kunst«[3] werden lässt. Eigentlich möchte man sich nicht länger auf die Beobachtung konkreter Interventionen reduziert wissen, sondern ganze »Evaluationsfelder« in Angriff nehmen.[4]
  2. Evaluationsforschung greift weit über das Recht hinaus. Sie erfasst jede reflektierte und organisierte Eigen[5]– und Fremdbewertung von Interventionen aller Art. [6] Recht spielt eher eine Nebenrolle.[7]
  3. Die Evaluationsforschung hängt jedoch am Tropf der Politik. Die vielfach gesetzlich festgeschriebenen Evaluierungspflichten[8] haben sich zu einer sprudelnden Geldquelle entwickelt.
  4. Alle wichtigeren Evaluationen stehen von vornherein in einem politischen Entscheidungsprozess und werden dort von Stakeholdern und Parteien mit Beschlag belegt. Gegen parteipolitische Festlegungen ist mit Evaluationen nur schwer anzukommen.[9]
  5. Die Politik gewinnt ihre Legitimation teils aus Verfahren, teils aus Ergebnissen.[10] Evaluation dient der Stützung ergebnisorientierter Legitimität. Evaluationsforschung wird von der Politik benutzt, um Vorentscheidungen zu stützen oder umgekehrt, um die Programme einer Vorgängerregierung zu kritisieren. Evaluationsforschung wird von der Politik ferner eingesetzt, um relativ unabhängig von den Zielen eines Gesetzes »Erfolge« vorzuzeigen[11]
  6. Nach ihrem Selbstverständnis will Evaluationsforschung die Politik beeinflussen. Um sich Einfluss auf die politische Entscheidungsfindung zu sichern, muss sie – wie Konzendorf es genannt hat – sich ko-evolutiv in gesellschaftliche und politische Zeitströmungen einpassen.[12]
  7. Stakeholder, Verwaltung und politische Akteure werden schon in den Forschungsprozess einbezogen, und zwar nicht bloß als Informanten, sondern als Politbarometer.
  8. Die Evaluationsforschung fühlt sich ermächtigt, unklare Zielvorgaben des Gesetzgebers zu klären. Sie verselbständigt sich gegenüber der Politik, indem sie indem sie eigenständig Rechtszwecke als Maßstab setzt. Dafür steht eine Reihe von Superzwecken zur Verfügung, die mehr oder weniger bei aller Politik mitschwingen, insbesondere Diversität, Gender-Mainstreaming, Nachhaltigkeit und soziale Gerechtigkeit.
  9. Die »Evaluationsfunktion« wird zu einem endogenen Bestandteil von Politik und Verwaltung.[13] Kurz, die Evaluationsforschung stilisiert sich zum Gewissen von Politik und Verwaltung. Es passt in dieses Bild, dass der Evaluation von juristischer Seite eine Funktion als zusätzliche Kontrolle der Verwaltung – neben Parlament und Justiz zugedacht wurde.[14]
  10. In der Evolutionsforschung tummeln sich daher auch viele, die nicht direkt zur institutionalisierten Wissenschaft zählen. Dazu gehören, um Namen zu nennen, die Hans Böckler Stiftung.

Auf diese Weise hat sich die Evaluationsforschung aus der Rechtssoziologie verabschiedet. Das ist kein Verlust, weil erstere für die Wirkungsforschung keine neuen Ansätze bringt, sondern nur die mit den gängigen empirischen Methoden erzielten Ergebnisse einer wertenden Zusammenschau unterzieht. Nun gerät freilich die Evaluationsforschung ihrerseits in Bedrängnis, und zwar aus Richtung der angewandten Wirtschaftsforschung, die neue Methoden entwickelt hat und dafür ein Betätigungsfeld sucht.[15] Den Ökonomen kommt der Wunsch nach evidenzbasierter Politikberatung entgegen. Inzwischen redet sie von »new economics of program evaluation«.[16] Da kann die gute alte Rechtssoziologie nicht mehr mithalten.

Als Nachtrag und Bestätigung die Definition von Thomas Widmer/Thomas DeRocchi, Evaluation. Grundlagen, Ansätze und Anwendungen, 2012, S. 11:

»Unter Evaluation wird eine wissenschaftliche Dienstleistung verstanden, sie sich mit der systematischen und transparenten Bewertung eines Gegenstandes befasst.«

Für die Rechtssoziologie spreche ich weiterhin von Evaluation schlicht für die Ex-post- Untersuchung der Wirkung von Gesetzen.

_______________________________

[1] Wollmann spricht von einem distanziert-analytischen Ansatz der Begleitforschung, der sich methodischer Stringenz und wissenschaftlicher Objektivität v erpfichtet fühle, im Gegensatz zu einem dialogischen oder partizipativen Ansatz mit Übergängen zur sozialwissenschaftlichen Aktionsforschung (Die Untersuchung der (Nicht-) Verwendung von Evaluationsergebnissen in Politik und Verwaltung, in: Sabine Kropp/Sabine Kuhlmann, Hg., Wissen und Expertise in Politik und Verwaltung, 2014, 87-102).

[2] Thomas Widmer u. a., Forschung über Evaluation in der Schweiz: Stand und Aussichten, Gesetzgebung und Evaluation (LeGes), 2016, 459-483.

[3] Thomas Widmer, Qualität der Evaluation – Wenn Wissenschaft zur praktischen Kunst wird. In: Stockmann, Reinhard (Hg.), Evaluationsforschung. Grundlagen und ausgewählte Forschungsfelder, 3. Aufl.,  2006, 85-112.

[4] Thomas Widmer/u. a., Forschung über Evaluation in der Schweiz: Stand und Aussichten, Gesetzgebung und Evaluation (LeGes), 2016, 459-483.

[5] Die Selbstevaluation bildet ein Kernelement des New Public Management. Der Übergang zum Controlling ist fließend.

[6] Nicola Döring/Jürgen Bortz, Forschungsmethoden und Evaluation in den Sozial- und Humanwissenschaften, 5. Aufl. 2016, S. 977.

[7] Besonders deutlich im »CEval-Ansatz zur Wirkungsevaluation/Stockmann’scher Ansatz« Stefan Silv estrini/Nicola Reade, CEval-Arbeitspapier 11, 2008,  sowie in den Bänden vonReinhard Stockmann, Handbuch zur Evaluation, 2007, und ders. (Hg.), Evaluationsforschung. Grundlagen und ausgewählte Forschungsfelder, 3. Aufl. 2008.

[8] Es ist kein Zufall, dass die Schweiz bei den wissenschaftlichen Anstrengungen zur Evaluierung, etwa mit der Zeitschrift LeGes, eine Vorreiterrole annimmt, denn dort ist in Art. 170 der Bundesverfassung eine Evaluierungspflicht explizit festgeschrieben, während eine solche Pflicht in Deutschland nur punktuell begründet wird, sei es durch Gesetz, sei es aus Art. 2 II 1 GG über eine Schutzpflicht.

[9] Gottfried Konzendorf, Zum Einfluss von Evaluationen auf die politische Entscheidungsfindung, in: Jan Ziekow (Hg.), Bewerten und bewertet werden, Wirkungskontrolle und Leistungssicherung in der öffentlichen Verwaltung, 2014, 121-148; S. 128.

[10] Niels Petersen, Demokratie und Grundgesetz. Veränderungen des Demokratieprinzips in Art. 20 b s. 2 GG angesichts der Herausforderungen moderner Staatlichkeit, 2008; Thomas Widmer, The Contribution of Evidence-Based Policy to the Output-Oriented Legitimacy of the State, Evidence & Policy: A Journal of Research, Debate and Practice 5, 2009, 351-372.

[11] Volker Baethge-Kinsky, Peter Bartelheimer, Alexandra Wagner, Die »Hartz-Gesetze«, ihre wissenschaftliche Evaluation und deren Verarbeitung, Abschlussbericht, Hans-Boeckler-Stiftung 2010, S. 34f.

[12] Gottfried Konzendorf, Zum Einfluss von Evaluationen auf die politische Entscheidungsfindung. in: Jan Ziekow (Hrsg.), Bewerten und bewertet werden. Wirkungskontrolle und Leistungssicherung in der öffentlichen Verwaltung, 2014, 121–148, S. 125f.

[13] Götz Konzendorf, Institutionelle Einbettung der Evaluationsfunktion in Politik und Verwaltung in Deutschland, in: Thomas Widmer u. a. (Hg.), Evaluation. Ein systematisches Handbuch, 2009, 26-39.

[14] Von Rudolf Steinberg, Evaluation als neue Form der Kontrolle final programmierten Verwaltungshandelns, Der Staat 15, 1976, 185-210.

[15] Bernhard Boockmann/Claudia M. Buch/Monika Schnitzer, Evidenzbasierte Wirtschaftspolitik in Deutschland, Defizite und Potentiale, Perspektiven der Wirtschaftspolitik 15, 2014, 307-323; Christoph M. Schmidt, Wirkungstreffer erzielen – Die Rolle der evidenzbasierten Politikberatung in einer aufgeklärten Gesellschaft, Perspektiven der Wirtschaftspolitik 15, 2014, 219-233; Joachim Weimann, Die Rolle von Verhaltensökonomik und experimenteller Forschung in Wirtschaftswissenschaft und Politikberatung, Perspektiven der Wirtschaftspolitik 16, 2015, 231-252. Vgl. auch Patrick Arni, Kausale Evaluation von Pilotprojekten: Die Nutzung von Randomisierung in der Praxis, Gesetzgebung und Evaluation (LeGes) 23, 2012, 55-386.

[16] Boockmann u.a. (S. 309) unter Bezugnahme auf Joshua D. Angrist/Jörn-Steffen Pischke, The Credibility Revolution in Empirical Economics: How Better Research Design is Taking the Con out of Econometrics, The Journal of Economic Perspectives 24, 2010, 3-30.

Ähnliche Themen