UTILIZATION OF EVALUATION RESULTS IN LEGAL POLICY-MAKING AND ADMINISTRATION
https://doi.org/10.24147/2542-1514.2017.1(1).7-18
Abstract
The article is devoted to the analysis of evaluation method and its impact on legal policy development in governance, including in the area of law enforcement.
The author outlines the importance of question whether, when and how the evaluation results of public policies, programs and measures has been utilized (or not utilized) in policy making and policy implementation.
In the pursuit of this guiding question the article will come in five steps.
First, major variants of evaluation will be briefly presented particularly with an eye on their respective “utilization potential”.
Second, different concepts will be sketched that have been forwarded to capture the utilization of social science generated knowledge by political, administrative and social actors. The author outlines a detailed description of types of evaluations: a retrospective, prelimi-nary, ongoing, interactive, – as well as existing concepts of application of its results.
Third, looking at Germany, Switzerland and the European Union as “cases in point” perti-ent research findings will be discussed. The article also subjected to a detailed analysis of the experience of Germany, Switzerland and the European Union in the field of utilization of evaluation results.
Fourth, a summary and conclusion will be given.
Fifth, some remarks on pertinent research needs will be made.
The author comes to the conclusion that that the rate of the utilization of evaluation-generated knowledge has so far turned out be, by and large, scarce. The author says that re-garding the politically crucial decisions the political rationality and its underlying political will of the decision-makers prevail while concerning less important decisions evaluation-generated evidence does show some effect and, hence, a dose of scientific rationality comes to the fore.
There is also a need for further research on the subject of how should (and should not) use assessment results when making legal and political decisions.
References
1. Weber M. Wirtschaft und Gesellschaft. Tübingen, Mohr Siebeck, 1922.
2. Lasswell H.D. The Policy Orientation, in: Lerner D., Lasswell H.D. (eds.). The Policy Sciences. Stanford Univer-sity Press, 1951, pp. 3–15.
3. Wagner P., Weiss C.H., Wittrock B., Wollmann H. The policy orientation: Legacy and perspective, in: Wag-ner P., Weiss C.H., Wittrock B., Wollmann H. (eds.). Social Science and Modern States. Cambridge University Press, 1991, pp. 2–19.
4. Campbell D.T. Reforms as Experiments. American Psychologist, 1969, Vol. 24, no. 4, pp. 409–429.
5. Hellstern G.-M., Wollmann H. (Hrsg.). Experimentelle Politik – Reformstrohfeuer oder Lernstrategie. Opladen, Westdeutscher Verlag, 1983.
6. Danielson C. Social Experiments and Public Policy, in: Fischer F., Miller G.J., Sidney M.S. (eds.). Handbook of Public Policy Analysis. CRC Press, 2007, pp. 381–392.
7. Furubo J.-E., Sandahl R. A Diffusion Perspective on Global Development in Evaluation, in: Furubo J.-E., Rist R.C., Sandahl R. (eds.). International Atlas of Evaluation. New Brunswick, Transaction, 2002, pp. 1–26.
8. Wollmann H. (ed.). Evaluation in Public Sector Reform. Edward Elgar, 2003.
9. Wollmann H. Evaluation in Public Sector Reform. Trends, Potentials and Limits, in: Wollmann H. (ed.). Eval-uation in Public Sector Reform. Edward Elgar, 2003, pp. 231–258.
10. Wollmann H. Policy Evaluation and Evaluation Research, in: Fischer F., Miller G.J. Sidney M.S. (eds.). Hand-book of Public Policy Analysis. CRC Press, 2007, pp. 393–404.
11. Wollmann H. Evaluation in Public Sector Reform. Towards a “new wave” of evaluation, in: Wollmann H. (ed.). Evaluation in Public Sector Reform. Edward Elgar, 2003, pp. 1–11.
12. Wollmann H. Contractual Research and Policy Knowledge, in: International Encyclopedia of Social and Be-havioral Sciences. Vol. 5. 2002, pp. 11574–11578.
13. Konzendorf G. Institutionelle Einbettung der Evaluationsfunktion in Politik und Verwaltung in Deutschland, in: Widmer Th., Beywl W., Carlo F. (Hrsg.). Evaluation. Wiesbaden, VS Verlag, 2009, ss. 27–33.
14. Korte R. Ziele, Aufwand und lokaler Nutzen von Kennzahlen und Kennzahlvergleichen für Kommunen aus der Sicht initerkommunaler Vergleichsringe, in: Kuhlmann S., Bogumil J., Wollmann H. (Hrsg.). Leistungsmessung und –vergleich in Politik und Verwaltung. Wiesbaden, VS Verlag, 2004, ss. 123–137.
15. Hollenrieder J. Benchmarking für soziale Dienstleistungen im Rahem der Arbeitsmarkt- und Sozialpolitik in: Kuhlmann S., Bogumil J., Wollmann H. (Hrsg.). Leistungsmessung und –vergleich in Politik und Verwaltung. Wiesba-den, VS Verlag, 2004, ss. 150–161.
16. Kuhlmann S. Performance measurement in European local governments: a comparative analysis of reform experiences in Great Britain, France, Sweden and Germany. International Review of Administrative Sciences, 2010, Vol. 76, no. 2, pp. 1–15.
17. Jäkel T., Kuhlmann S. Lernen von den Besten? Steuerung und Nutzung von Leistungsvergleichen in europä-ischen Verwaltungen, in: Kropp S., Kuhlmann S. (Hrsg.). Wissen und Expertise in Politik und Verwaltung, der modern staat, Sonderheft 1/2013. Verlag B. Budrich, 2014, pp. 141–160.
18. Kuhlmann S., Wollmann H. Introduction to Comparative Public Administration. Elgar, 2014.
19. Luhmann N. Soziale Systeme. Frankfurt, 1993.
20. Bogumil J., Grohs S., Kuhlmann S., Ohm A. Zehn Jahre Neues Steuerungsmodell. Berlin, Sigma, 2007.
21. Kuhlmann S., Bogumil J., Grohs S. Evaluating administrative modernization in German local government: success or failure of the “New Steering Model”. Public Administrative Review, 2008, vol. 68, no. 5, pp. 851–863.
22. Balthasar A. Fremd- und Selbstevaluation kombinieren: der ‘Critical Friend Approach” als Option. Zeitschrift für Evaluation, 2012, Vol. 11, no. 2, ss. 173–192.
23. Patton M.Q. Utilization-focused evaluation, 3rd ed. Thousand Oaks, Sage, 1997.
24. Wollmann H. Evaluation in Politik und Verwaltung, Ansätze, Ergebnisse, Verwendung, in: Reichard Ch., Schröter E. (Hrsg.). Zur Organisation öffentlicher Aufgaben. Leverkusen, Verlag B. Budrich, 2013.
25. Weiss C.H. The many meanings of research utilization. Public Administration Review, 1979, Vol. 39, no. 5, pp. 563–574.
26. Wollmann H. Kontrolle in Politik und Verwaltung: Evaluation, Controlling und Wissensnutzung, in: Schu-bert K., Brandelow N.(Hrsg.). Lehrbuch der Politikfeldanalyse 2.0, 2. Aufl. München, Oldenbourg Verlag, 2009, ss. 379–400.
27. Beck U., Bonß W. (Hrsg.). Verwendung, Verwandlung, Verwissenschaftlichung. Frankfurt am Main, Suhr-kamp, 1989.
28. Caplan N., Morrison A., Stambaugh R. The Use of Social Science Knowledge in Policy Decisions at the Na-tional Level. Ann Arbor, 1975.
29. Habermas J. Verwissenschaftlichte Politik und öffentliche Meinung, in: Technik und Wissenschaft als Ideo-logie. Frankfurt am Main, Suhrkamp, 1968.
30. Alkin M.C. Utilization of evaluation, in: Mathison S. (ed.). Encyclopedia of Evaluation. Thousand Oaks, Sage, 2005, pp. 234–236.
31. Balthasar A. Evaluationen in der Schweiz. Verbreitung und Verwendung, in: Widmer T., Beywl W., Carlo F. (Hrsg.). Evaluation. Ein systematisches Handbuch. Wiesbaden, VS Verlag, 2009, ss. 486–498.
32. Weiss C.H. Policy Research: data, ideas or arguments, in: Wagner P., Weiss C.H., Wittrock B., Wollmann H. (eds.). Social Sciences and Modern States. Cambridge University Press, 1991, pp. 290–306.
33. Krautzberger M., Wollmann H. Verwendung sozialwissenschaftlichen Wissens in der Gesetzgebung, in: Zeit-schrift für Rechtssoziologie. 1988, ss. 188–205.
34. Caplan N. Knowledge Conversion and Utilization, in: Holzner B., Knorr K., Strasser H. (Hrsg.). Realizing social Science Knowledge. Wien, 1983.
35. Wollmann H. Evaluation and public sector reform in Germany: Leaps and lags, in: Wollmann H. (ed.). Eval-uation in Public Sector Reform, Edward Elgar, 2003, pp. 118–132.
36. Widmer T., Beywl W., Carlo F. (Hrsg.). Evaluation. Ein systematisches Handbuch. Wiesbaden, VS Verlag, 2009, ss. 117–128.
37. Stockmann R. (Hrsg.). Evaluationsforschung, 3. Aufl. Münster, Waxmann, 2006.
38. Stockmann R. Evaluation staatlicher Entwicklungsppolitik, in: Stockmann R. (Hrsg.). Evaluationsforschung, 3. Aufl. Münster, Waxmann, 2006, ss. 278–416.
39. Zintl M. Evaluierung in der deutschen Entwicklungszusammenarbeit, in: Widmer T., Beywl W., Carlo F. (Hrsg.). Evaluation. Ein systematisches Handbuch. Wiesbaden, VS Verlag, 2009, ss. 245–255.
40. Lorz R.E. Das Inspektionsreferat des Bundesministeriums für wirtschaftliche Zusammenarbeit, in: Hellstern G.-M., Wollmann H. (Hrsg.). Handbuch zur Evaluierungsforschung. Bd. 1. Opladen, Westdeutscher Verlag, 1984.
41. Spiel C., Bergsmann E. Zur Nutzung der Evaluationsfunktioon. Partielle Bestandsaufnahme und Pilotstudie in österreichischen und deutschen Bundesministerien, in: Widmer T., Beywl W., Carlo F. (Hrsg.). Evaluation. Ein sys-tematisches Handbuch. Wiesbaden, VS Verlag, 2009, ss. 478–485.
42. Mader L. Die institutionelle Einbettung der Evaluationsfunktion in der Schweiz, in: Widmer T., Beywl W., Carlo F. (Hrsg.). Evaluation. Ein systematisches Handbuch. Wiesbaden, VS Verlag, 2009.
43. Balthasar A. Institutionelle Verankerung und Verwendung von Evaluationen. Praxis und Verwendung von Evaluationen in der Schweizer Bundesverwaltung. Zürich, Rüegger, 2007.
44. Balthasar A. Der Einfluss unterschiedlicher Instrumentalisierungsmodelle auf die Verwendung von Evalua-tioen: Erfahrungen aus der Schweiz. Zeitschrift für Evaluation, 2008, Vol. 7, no. 2, ss. 243–271.
45. Leeuw F.L. Evaluation in Europa, in: Stockmann R. (Hrsg.). Evaluationsforschung, 3. Aufl. Münster, Waxmann, 2006, ss. 64–84.
46. Toepel K., Schwab O. Evaluation in der europäischen Strukturpolitik. Zeitschrift für Evaluation, 2005, Vol. 1, ss. 63–74.
47. Wildavsky A. Speaking Truth to Power. Little Brown, 1979.
Review
For citations:
Wollmann H. UTILIZATION OF EVALUATION RESULTS IN LEGAL POLICY-MAKING AND ADMINISTRATION. Law Enforcement Review. 2017;1(1):7-18. https://doi.org/10.24147/2542-1514.2017.1(1).7-18
Views:
911
Email this article 