Forms and practices of accountability in education

Educational Assessment, Evaluation and Accountability -     

Making Sense of Academic Development

One aim of student evaluation of instruction is the improvement of teaching quality, but there is little evidence that student assessment of instruction alone improves teaching. This study tried to improve the effects of evaluation by combining evaluation with individual counselling in an institutional development approach. Evaluation was conducted in a private school for speech therapy (logopedia) in 35 classes (N = 16 teachers, N = 592 students). Evaluation was done twice within a period of three to twelve months using a standardized questionnaire (HILVE‐II) developed for evaluation of university courses. The intervention effect on teaching quality was more than half a standard deviation on the teacher scales. Despite the fact that the counsellor had no pedagogical training, the quality of teaching not only improved quantitatively and qualitatively but also became more homogeneous although the relative rank listing of teachers did not change.

Ein Ziel der studentischen Lehrevaluation ist die Verbesserung von Lehrqualität. Es gibt aber wenig empirische Evidenz dafür, dass studentische Lehrevaluation allein Lehre verbessern kann. Diese Studie versuchte, die Effekte von Veranstaltungskritik in einem Ansatz, der Lehrevaluation mit Beratung verbindet, zu erhöhen. Lehrveranstaltungsevaluation wurde in einem privaten Ausbildungsinstitut für Logopädie in 35 Kursen von 16 Dozenten mit 592 Studierenden durchgeführt. Veranstaltungskritik wurde zweimal praktiziert binnen eines Zeitabschnitts von drei bis zwölf Monaten anhand eines Fragebogens (HILVE‐II), der für die Evaluation von Hochschulveranstaltungen entwickelt wurde. Der Verbesserungseffekt auf Lehrqualität war in den dozentenbezogenen Skalen größer als eine halbe Standardabweichung. Obwohl der Berater keine pädagogische Ausbildung hatte, verbesserte sich die Lehrqualität nicht nur in den quantitativen und qualitativen Maßen, sondern wurde auch homogener. Die relative Rangreihung innerhalb der Dozenten blieb aber stabil.

Un des objectifs de l’évaluation, par les étudiants, de l’enseignement est l’amélioration de la qualité de ce dernier. Pourtant, les preuves que l’évaluation de l’enseignement par les étudiants améliore celui‐ci sont limitées. Cette étude a tenté d’améliorer les effets de l’évaluation en combinant l’évaluation avec du conseil individuel au sein d’une approche de développement institutionnel. L’évaluation a été effectuée dans 35 classes (N = 16 enseignants, N = 592 étudiants) d’une école privée d’orthophonie (logopédie). L’évaluation a été effectuée deux fois sur une période variant de trois à seize mois en employant un questionnaire standard (HILVE‐II) développé pour l’évaluation des cours universitaires. L’effet relatif à la qualité de l’enseignement associé à l’intervention représentait plus d’un demi écart‐type sur l’échelle des enseignants. En dépit du fait que le conseiller n’avait pas de formation pédagogique, la qualité de l’enseignement s’est améliorée à la fois au plan quantitatif et au plan qualitatif, en plus de devenir davantage homogène, bien que le positionnement relatif des enseignants n’ait pas changé.     

Das MINERVA-Projekt: Datenbankselektion für Peer-to-Peer-Websuche

In diesem Artikel wird MINERVA pr?sentiert, eine prototypische Implementierung einer verteilten Suchmaschine basierend auf einer Peer-to-Peer (P2P)-Architektur. MINERVA setzt auf die in der P2P-Welt verbreitete Technik verteilter Hash-Tabellen auf und benutzt diese zum Aufbau eines verteilten Verzeichnisses. Peers in unserem Ansatz entsprechen v?llig autonomen Benutzern mit ihren lokalen Suchm"oglichkeiten, die bereit sind, ihr lokales Wissen und ihre lokalen Suchm?glichkeiten im Rahmen einer Kollaboration zur Verfügung zu stellen. Wir formalisieren unsere Systemarchitektur und beschreiben das zentrale Problem einer effizienten Suche nach vielversprechenden Peers für eine konkrete Anfrage innerhalb des Verbundes. Wir greifen dabei auf existierende Methoden zurück and passen diese an unseren Systemkontext an. Wir pr?sentieren Experimente auf realen Daten, die verschiedene dieser Ans?tze vergleichen. Diese Experimente zeigen, dass die Qualit?t der Ans?tze variiert und untermauern damit die Wichtigkeit und den Einfluss einer leistungsstarken Methode zur Auswahl guter Datenbanken. Unsere Experimente deuten an, dass eine geringe Anzahl sorgf?ltig ausgew?hlter Datenbanken typischerweise bereits einen Gro?teil aller relevanten Ergebnisse des Gesamtsystems liefert.     

Competence Profile School Management (CPSM) – an inventory for the self-assessment of school leadership

The professional demands on school leaders have changed drastically and have become highly complex in the last few years. The professionalization of school leaders is high on the agenda. Human resource management includes different aspects of professionalization. One major domain is the preparation, induction and continuous professional development of individual leaders and leadership teams. Another is personnel marketing and selection, which includes the question of attracting capable future leaders and of appointing the right candidates. However in Europe there is a need for standardised tools which provide systematic feedback to professionals interested in assessing their strengths and individual development needs. Suitable instruments are still scarce. The Competence Profile School Management CPSM (German: KompetenzProfil SchulManagement; KPSM) is the first online-based self-assessment in the German language which has been designed to fit the school context and is based on psychometric principles. It offers participants the possibility to reflect their strengths and weaknesses in different requirement areas of school leadership; and to compare their individual results with peers from the school context, thus gaining valuable information on their individual profiles when planning their professional development and careers. After sketching the theoretical and empirical background, this article presents information about the aims and purpose of CPSM, the tool’s development, its test scales and test formats, the results of the pilot study and those of the evaluation study. Then, the further development of the tool in terms of modifications and add-ons are outlined, before, finally, the tool’s contribution to practice and research is discussed.     

The Devil’s Advocate

Science & Education - While dissent is recognized as a necessary component of scientific knowledge production, in school settings, it is a double-edged sword that can disrupt and undermine...