Probleme und Methoden der Qualitätsbewertung in verschiedenen Politikfeldern : Gemeinsamkeiten und Unterschiede in den Ansätzen zur Qualitätserfassung und Evaluation in Hochschulen und öffentlich-rechtlichem Rundfunk
Titelübersetzung:Problems and methods of quality evaluation in different policy fields : similarities and differences of quality measurement and evaluation approaches in higher education and public broadcasting
Autor/in:
Seyfried, Markus
Quelle: Zeitschrift für Evaluation, Jg. 11 (2012) H. 2, S. 209-232
Inhalt: "Der Artikel widmet sich der Gegenüberstellung von methodischen Problemen der Qualitätsbewertung im Bereich der Hochschulen und des öffentlich-rechtlichen Rundfunks. Beide Politikfelder sind in weiten Teilen durch gleichgerichtete externe und interne Rahmenbedingungen gekennzeichnet und sind damit geradezu prädestiniert für eine vergleichende Gegenüberstellung. Die Probleme der Qualitätsbewertung werden dabei unter drei zentralen Gesichtspunkten diskutiert: (1) die Definition von Qualität, (2) die Operationalisierung von Qualität und (3) die Interpretation von Qualität. Die zu bewältigenden Probleme sind in beiden Politikfeldern nicht immer gleich gelagert, sondern variieren in Abhängigkeit der Untersuchungskriterien. Folglich können die Debatten über die Qualitätserhebungen im öffentlich-rechtlichen Rundfunk und an Universitäten voneinander lernen. Interdisziplinäre Betrachtungen bieten damit eine große Chance zur Entwicklung von Methoden und Perspektiven." (Autorenreferat)
Inhalt: "This article distinguishes methodological problems in quality evaluation and measurement in two policy fields, namely higher education and public broadcasting. Both are characterized by similar external and internal basic conditions and are thus suitable for comparative research. The difficulties of quality measurement and evaluation are discussed with respect to three main features: (1) definition of quality, (2) operationalization of quality and (3) Interpretation of quality. Furthermore the identified difficulties in both areas are not always the same, because they depend on different research criteria. Thus the debates of quality measurement and evaluation in higher education and public broadcasting can learn from each other and increase the understanding of quality measurement in general. In addition the comparative design provides opportunities for the development of methods and perspectives." (author's abstract)
Die Exzellenzinitiative: Beobachtungen aus der Implementierungsphase
Titelübersetzung:The excellence initiative: observations from the implementation phase
Autor/in:
Sondermann, Michael; Simon, Dagmar; Scholz, Anne-Marie; Hornbostel, Stefan
Quelle: iFQ - Institut für Forschungsinformation und Qualitätssicherung; Bonn (iFQ-Working paper, No. 5), 2008. 187 S.
Inhalt: Rund zwei Jahre nach dem Start der ersten Exzellenzeinrichtungen legt das Institut für Forschungsinformation und Qualitätssicherung (iFQ) einen Bericht zur Implementierungsphase der Exzellenzinitiative (Graduiertenschulen und Exzellenzcluster) vor. Das iFQ hat im Zeitraum von Juli 2007 bis Mai 2008 Textanalysen der Förderanträge, Interviews mit Sprecherinnen und Sprechern der Schulen und Cluster, eine Stammdatenerhebung und eine Befragung aller maßgeblich beteiligten Wissenschaftlerinnen und Wissenschaftler (Principal Investigators) durchgeführt. Auf dieser Grundlage konnten Eindrücke und Erfahrungen zur Umsetzung der Fördermaßnahmen gewonnen werden, sowohl hinsichtlich erster Erfolge als auch sich abzeichnender Problemlagen. In dem vorliegenden Bericht werden zunächst Grunddaten zu den beiden Förderlinien Graduiertenschulen und Exzellenzcluster präsentiert und dann die geplanten Maßnahmen auf Grundlage einer Analyse der Förderanträge der ersten Förderrunde systematisch dargestellt und den Zielen der Exzellenzinitiative für die beiden Förderlinien zugeordnet. In einem weiteren Kapitel werden die Strukturen, Organisationsweisen, Steuerungsinstrumente der Graduiertenschulen und Exzellenzcluster sowie Kooperationen, wie sie sie mit externen Partnern etablieren, beschrieben. Anschließend werden Beobachtungen zur Umsetzung der Vorhaben in einigen wichtigen Feldern, wie beispielsweise zu Chancen interdisziplinärer Formen der Zusammenarbeit, zum Verhältnis von Konkurrenz und Kooperation sowie zu Anspruch und Realität bei der Stellenbesetzung dargestellt. Angesichts des kurzen Beobachtungszeitraums haben diese Analysen zum Teil noch vorläufigen Charakter. (ICD2)
Quelle: Evaluation und Qualitätssicherung von Forschung und Lehre im Bologna-Prozess. Georg Rudinger (Hrsg.), Britta Krahn (Hrsg.), Christian Rietz (Hrsg.). Göttingen: V&R unipress (Applied research in psychology and evaluation), 2008, S. 59-76
Inhalt: Der Verfasser beschäftigt sich mit dem dritten Zyklus des Bologna-Programms, der sich der Promotion widmet. Strittig ist, ob das Promotionsstudium als dritte Phase des Studiums oder als ersten Stufe einer Forscherlaufbahn, also quasi als Berufseinstieg betrachtet werden soll. Die europäische Praxis der "doctoral education" sieht gegenwärtig ausgesprochen bunt aus. Reformerwartungen orientieren sich häufig am Vorbild der USA. Der wesentliche Unterschied im Vergleich zu Deutschland liegt in der kollektiven Betreuung und Prüfung und der Integration von Lehrveranstaltungen, beides Elemente, die dem deutschen "Zauberlehrling-Modell" fremd sind. Die Beschwörung von Qualität korrespondiert mit einer enormen Unklarheit darüber, welche Art von Qualifikation eine Promotion eigentlich bescheinigt - das Bologna-Modell formuliert hier Anforderungsstrukturen, die für Studienabschlussprüfungen typisch sind. Eine tatsächliche Prüfung von Dissertationen hinsichtlich ihres Beitrags zur Forschung liegt gegenwärtig nicht vor. Wie es um die Qualität der Promotion bestellt ist und auf welche Weise sie künftig gesichert werden soll, ist unklar. (ICE)
CEWS Kategorie:Wissenschaftspolitik, Hochschulen, Studium und Studierende
Dokumenttyp:Sammelwerksbeitrag
Empfehlungen zu einer lehrorientierten Reform der Personalstruktur an Universitäten
Titelübersetzung:Recommendations regarding a teaching-oriented reform of the personnel structure at universities
Herausgeber/in:
Wissenschaftsrat
Quelle: Wissenschaftsrat; Köln: Wissenschaftsrat, 2007. 77 S.
Inhalt: Der Wissenschaftsrat stellt fest, dass die deutschen, staatlichen Universitäten mit ihrer bisherigen Personalstruktur und den dazugehörigen Karrierewegen den zentralen Herausforderungen der nächsten Jahre nicht gerecht werden. Für die Zukunft wird ein Ausbau der Studienkapazitäten und eine Verbesserung der Qualität der Lehre als notwendig erachtet. Vor diesem Hintergrund wurden vom Wissenschaftsrat auf der Grundlage einer Analyse der Personalstruktur deutscher Hochschulen und eines Vergleich mit den Personalstrukturen anderer Länder (Großbritannien, Kanada, Niederlande, Schweden) Empfehlungen für Reformen erarbeitet, die zu einer qualitätsorientierten Ausweitung der Studienplatzkapazitäten und zu einer Steigerung der Attraktivität der wissenschaftlichen Karriere beitragen sollen. Im Mittelpunkt steht dabei die Empfehlung, Professuren mit einem Tätigkeitsschwerpunkt in der Lehre zu etablieren, wobei der Zugang zu diesen Positionen über einen neuen, eigenständigen Qualifizierungsweg der Juniorprofessur mit Schwerpunkt Lehre führen sollte. Voraussetzung für die erfolgreiche Einführung ist der Aufbau eines umfangreichen, klar strukturierten Angebotes zur Vermittlung von Lehrkompetenzen, das schnellstmöglich entwickelt und dann allen Nachwuchskräften und Hochschullehrern zur Verfügung stehen soll. Zur systematischen Professionalisierung der Lehrtätigkeit sollen Qualifizierungsangebote und Kompetenzüberprüfungen eingeführt werden. Weiterhin wird vorgeschlagen, besonders qualifizierte Gymnasiallehrer mit Aufgaben in der Lehre zu betrauen. Der Wissenschaftsrat sieht außerdem Potenzial in einem zusätzlichen Engagement von Wissenschaftlern der außeruniversitären Forschungsinstitute, er spricht sich für ein erneuertes System attraktiv bezahlter Lehraufträge aus und er nennt Regeln und Bedingungen für die Beteiligung von Nachwuchswissenschaftlern an der Lehre. (IAB)
Hochschulinterne Steuerung durch Finanzierungsformeln und Zielvereinbarungen : Dokumentation zur gleichnamigen Tagung am 22. und 23. November 2006 in Hannover
Titelübersetzung:Internal management of universities by means of funding formulae and target agreements : proceedings of the conference of the same name in Hanover on November 22 and 23, 2006
Herausgeber/in:
Jaeger, Michael; Leszczensky, Michael; HIS Hochschul-Informations-System GmbH
Quelle: HIS Hochschul-Informations-System GmbH; Hannover (HIS Forum Hochschule, 4/2007), 2007. 130 S.
Inhalt: Inhaltsverzeichnis: Michael Jaeger, Michael Leszczensky: Hochschulsteuerung im Kontext veränderter gesellschaftlicher Rahmenbedingungen - eine Einführung (5-22); Michael Breitbach: Ansätze und Instrumente auf der Ebene Hochschulleitung - Fakultäten. Einführungsstatement (23-24); Jürgen Weichselbaumer: Betriebswirtschaftliche Ansätze der internen Hochschulsteuerung - Konzeption und Umsetzung am Beispiel TUM. The Entrepreneurial University (25-34); Jürgen Lüthje: Qualitative Aspekte der Hochschulsteuerung (35-38); Fritz-Jürgen Theiß, Peter Cornel: MIR - Modell Indikatorgestützte Ressourcenverteilung an der TU Darmstadt. Teil 1: MIR - Chance für Frieden. Teil 2: MIR aus Sicht eines Fachbereichs (39-50); Peter Mayer: Ansätze und Instrumente innerhalb von Fakultäten - Einführungsstatement (51-52); Matthias Dannenberg: Erfahrungen mit leistungsbezogener Mittelvergabe im Fachbereich Philosophie und Geisteswissenschaften der Freien Universität Berlin (53-60); Kai Wülbern: Indikatorgestützte Mittelvergabe an der Fakultät Elektrotechnik und Informationstechnik der TU München (61-64); Nikolaus Lange, Felix Horch: Ressourcenallokation am Beispiel einer Technischen Fakultät (65-72); Ben Jongbloed: University governance from an international perspective: trends, challenges and the governance equaliser (73-82); Martin Mehrtens: Leitung in Hochschulen im Spannungsfeld zwischen Ressourcenmanagement und Mitarbeiterführung - Einführungsstatement (83-86); Anke Rigbers: Realitymatters - zum Zusammenhang neuer Instrumente und ihrer Anwendung (87-94); Peter Mayer: Neue Hochschulsteuerung - per aspera ad astra? (95-98); Lothar Zechlin: Felder strategischer Hochschulentwicklung (99-106); Michael Jaeger, Frank Ziegele: Leistungsorientierte Steuerung an Hochschulen - gelingt das? Einführungsstatement (107-108); Ingo Bayer: Möglichkeiten der Fakultätssteuerung mit betriebswirtschaftlichen Instrumenten: Chancen und Risiken (109-112); Nicolai Müller-Bromley: Leistungsorientierte Steuerung - Killer der Kreativität (113-118); Uwe Schimank: Leistungsorientierte Steuerung und professionelle Kollegialität (119-121).
Quelle: Von der Qualitätssicherung der Lehre zur Qualitätsentwicklung als Prinzip der Hochschulsteuerung. Workshop "Qualitätsparameter und Leistungsindikatoren als Instrumente der Hochschulentwicklung"; Bonn: Hochschulrektorenkonferenz (Beiträge zur Hochschulpolitik), 2006, S. 168-184
Inhalt: In vielen Ländern der Welt sind innerhalb der letzten ein oder zwei Jahrzehnte eindrucksvolle Aktivitäten entfaltet worden, Evaluation in Hochschule und Wissenschaft einzurichten, auszubauen und zu sophistizieren. Dabei ist hier unter Evaluation, wie später ausgeführt, die Gesamtheit der zumeist regelmäßigen und flächendeckenden, institutionalisierten und systematischen Aktivitäten zur Analyse und der damit verbundenen Bewertung des mehr oder weniger "Guten" in Hochschule und Wissenschaft gemeint, die mit dem Zweck unternommen wird, das "Gute" zu fördern und das "Schlechte" einzudämmen. Der vorliegende Beitrag geht der Frage nach, was Qualität in Hochschulen und Wissenschaft bedeutet und wie diese evaluiert werden kann. Hochschule und Wissenschaft - ein Sektor der Gesellschaft, der für sich die höchste Qualität systematischen Erkennens und rationalen Verstehens reklamiert - zeichnen sich durch ein hohes Maß von Unklarheit aus, wenn es darum geht, das zu bezeichnen, was die Kriterien wünschenswerter Ergebnisse der eigenen Aktivitäten sind. "Qualität" ist nicht nur ein vager Begriff, sondern er wird als Kampfbegriff instrumentalisiert, wenn Probleme von Hochschule und Wissenschaft und Ansätze zur Verbesserung zur Diskussion stehen. Sein Gebrauch ist von quasi-religiösen Werthaltungen geprägt. Er dient der Verdunklung in den Diskussionen darüber, welcher Mix von wissenschaftlicher Güte, gesellschaftlicher Relevanz und Ziel-Mittel-Effizienz angestrebt werden soll; er wird vielfach usurpatorisch beschworen, wenn es darum geht, welches Maß von horizontaler und vertikaler Vielfalt wünschenswert, akzeptabel oder nicht tolerierbar sei. Es ist wichtig eine Evaluationskultur an Hochschulen zu etablieren an der alle beteiligt sind. (ICD2)
Indikatoren und Peer Review in der Evaluationspraxis
Titelübersetzung:Indicators and peer review in evaluation practice
Autor/in:
Schreier, Gerhard
Quelle: Von der Qualitätssicherung der Lehre zur Qualitätsentwicklung als Prinzip der Hochschulsteuerung. Workshop "Qualitätsparameter und Leistungsindikatoren als Instrumente der Hochschulentwicklung"; Bonn: Hochschulrektorenkonferenz (Beiträge zur Hochschulpolitik), 2006, S. 268-272
Inhalt: Die Evaluationsagentur Baden-Württemberg (evalag) ist als Stiftung des öffentlichen Rechts im Jahr 2000 errichtet worden und hat ihre operative Tätigkeit im Sommer 2001 aufgenommen. Lenkungsorgan der Agentur ist der Stiftungsrat, in dem die Vertreter der Hochschulen sechs von acht Stimmen haben. Die evalag sieht ihre grundlegenden Aufgaben darin, die Hochschulen in ihrer Qualitätsentwicklung und in ihrer Rechenschaftslegung zu unterstützen, die Entscheidungsträger, vor allem die Leitungen der Hochschulen, in die Lage zu versetzen, strategische Entscheidungen auf informierter Grundlage zu treffen, und schließlich die Öffentlichkeit über die wesentlichen Ergebnisse der Evaluationsverfahren zu informieren. Der vorliegende Beitrag diskutiert die Fragestellung des Workshops "Leistungsmessung in der Lehre", der im Rahmen einer Veranstaltung des Projekts Qualitätssicherung der HRK am 24./25. Januar 2005 in München stattfand, vor dem Hintergrund der praktischen Tätigkeit einer Evaluationsagentur. Dabei wird deutlich, dass Peer Review und Leistungsindikatoren, zwei Evaluationsverfahren sind, die sich ergänzen bzw. zusammengehören. Abschließend geht der Autor auf neue Entwicklungen ein, die zur Zeit erprobt werden, wie etwa ein allgemeiner Referenzrahmen, der allgemeine Qualitätsstandards (vor allem in Begriffen von Prozessqualität) vorgibt, an denen alle Hochschulen einheitlich gemessen werden. (ICD2)
Titelübersetzung:"Mapping of Excellence" in den Wirtschaftswissenschaften
Autor/in:
Peter, Viola
Quelle: Von der Qualitätssicherung der Lehre zur Qualitätsentwicklung als Prinzip der Hochschulsteuerung. Workshop "Qualitätsparameter und Leistungsindikatoren als Instrumente der Hochschulentwicklung"; Bonn: Hochschulrektorenkonferenz (Beiträge zur Hochschulpolitik), 2006, S. 245-249
Inhalt: Die Autorin stellt eine Untersuchung der Europäischen Kommission vor, die die Entwicklung von Methoden der Qualitätsevaluierung wirtschaftswissenschaftlicher Forschungseinrichtungen in den 15 EU-Staaten zum Ziel hatte. Die Diskussion und Umsetzung eines "Mapping of Excellence" durch die Europäische Kommission hängt mit dem Ziel der Schaffung eines Europäischen Forschungsraums zusammen. Das erklärte Ziel des Mapping ist die Schaffung von Transparenz - welche europäische Einrichtung ist im internationalen Vergleich besonders gut in einer bestimmten Disziplin? Eine Ratsentscheidung von 2000, "Exzellenz in allen EU-15 Mitgliedstaaten und in allen Disziplinen bis Ende 2001 zu identifizieren", erwies sich als nicht umsetzbar. Die Kommission führte drei Pilotstudien durch, darunter eine zu den Wirtschaftswissenschaften. Auf den Vergleich von Inputindikatoren musste verzichtet werden, weil Angaben über die finanzielle Ausstattung, Anzahl der Wissenschaftler und Studierenden nicht einheitlich für alle Mitgliedstaaten erhoben werden. Man beschränkte sich auf Outputindikatoren, darunter eine Reihe bibliometrischer Messzahlen, die auf Grundlage des Social Science Citation Index (SSCI) und der Datenbank EconLit gebildet wurden. "Anzahl der Publikationen", "Zitatrate" oder der "Anteil der nicht-zitierten Publikationen" wurden zur Bewertung der einzelnen Einrichtungen und Sub-Disziplinen herangezogen. Als qualitative Komponente wurde ein so genanntes "Reputation Assessment" durchgeführt, eine Befragung, die eine Abschätzung des Renommees von Ökonomen bringen sollte. Insgesamt kann festgehalten werden, dass ein indikatorgestütztes Verfahren nur wenig vergleichbare Daten zur Verfügung hat, die für aussagekräftige Indikatoren Verwendung finden können. Insbesondere bei den Inputindikatoren sind Harmonisierungsanstrengungen nötig. (ICD)
Quelle: Gegenworte : Hefte für den Disput über Wissen, (2000) H. 5, S. 23-25
Inhalt: Der Beitrag enthält kritische Anmerkungen zum Selbstverständnis der Wissenschaft und zur Beurteilung der eigenen Leistungen, in welcher in Bezug auf die Qualität oft von "Exzellenz" die Rede ist. Es wird zum einen die Frage diskutiert, mit welchem Recht sich eine so verstandene Wissenschaft aus dem allgemeinen Arbeitsprozess heraushebt und Forschung als etwas definiert, das jenseits der üblichen Beurteilungsmaßstäbe stattfindet. Zum anderen werden Bedenken gegen die verbindliche Messung von Qualität und eine "Arithmetisierung" aller wissenschaftlichen Verhältnisse erhoben: "Ein neuer Furor ist ausgebrochen; wir sind in der Wissenschaft auf dem besten Wege, ein Volk von Evaluierern zu werden." Eine weitere Frage betrifft das Mittelmaß und die Durchschnittlichkeit in der Wissenschaft: "Es ist das breite Mittelmaß, das auch in der Wissenschaft das Gewohnte ist, und es ist die breite Qualität, die aus dem Mittelmaß wächst, die uns in der Wissenschaft am Ende auch die Exzellenz beschert - mit oder ohne angestrengte Evaluierung". (ICI)