« Quelle est la portée de nos actions de conseillers et conseillères pédagogiques?« , tel est le thème du prochain BSQF dont j’ai fait l’annonce récemment. Derrière cette question se situent d’autres interrogations à propos de nos approches et méthodes de travail, de nos relations avec les enseignant-e-s et l’institution en général, de notre efficacité, etc.
Sans anticiper sur les résultats de ces réflexions que nous mènerons en octobre prochain, j’aimerais signaler la parution récente d’un livre sur ce sujet: Evaluating the effectiveness of academic development: principles and practice édité par Lorraine Stefani.
Le livre débute par un avant-propos d’Angela Brew qui nous confie une anecdote à propos de son métier de conseillère pédagogique:
A few months ago I was at a conference on student learning where I met an academic I hadn’t seen for over 15 years. He seemed especially pleased to see me. ‘You know’, he said, ‘you changed my life!’ Smiling and nodding, he told others around him: ‘I wouldn’t be here today if it hadn’t been for her.’ I’m not telling this brief tale to blow my own trumpet. This is what academic developers do. They change people’s lives. Many, if not most, could probably tell a similar story. The normal business of academic developers is to bring about change. Yet this kind of transformation is not captured in institutional measures, evaluations and reports of effectiveness. Academic development is an altruistic pursuit, often going unrecognised and unrewarded. But the effects on individual academics can be profound.
Je trouve l’anecdote assez significative: les conseiller-ère-s pédagogiques changeraient la vie professionnelle des enseignant-e-s de l’enseignement supérieur… Plus modestement peut-être, je dirais juste qu’on peut aider les enseignant-e-s à apprendre à enseigner et à développer leurs compétences dans ce domaine… et si on considère que l’apprentissage est une forme de changement, alors oui, on devrait changer un peu leur vie d’enseignant-e.
Mais que change-t-on exactement? Dans quelle mesure? A quel niveau d’action des enseignant-e-s? Ceux/celles-ci apprécient-ils/elles nos interventions? Qu’apprennent-ils/elles à notre contact? Leurs enseignements s’en trouvent-ils améliorés? Ce sont touts ces questions qui seront au cœur de nos débats en octobre prochain à Leysin.
Dans le chapitre 2 du livre dont je parle ici (p. 26), Shelda Debowski propose un cadre d’analyse pour évaluer les « impacts » des actions des conseiller-ère-s pédagogiques sur la formation des enseignant-e-s, la communauté universitaire et l’institution elle-même. Cela donne pas mal d’indications sur nos actions, les niveaux sur lesquels nous agissons dans nos institutions et les méthodes possibles pour évaluer ces actions:
Focus | Example of activities | Evaluative methods/ indicators |
Educational role | ||
Entry-level capabilities, e.g. teaching, research, management skills, elearning |
Educational programmes
Graduate certificate qualifications Self-selected workshops Mentorship schemes Website support Online learning Teaching excellence submissions support Grant-seeking assistance |
Inputs
Hours of development offered Participant feedback/ satisfaction Participation in programmes and activities Expenditure on academic development activities Outputs Increased quality of participant work/ submissions Submission success rate Supervisor feedback on changes in practice/ outcomes Increases in student ratings/ feedback on individual’s work Pre-test/ post-test of participant knowledge, skills, attitudes and |
Community engagement (influencing and culture setting) |
||
Cohort (role-based) networks and learning
Local community support |
Leadership/ role-based programmes
Customised support/ bespoke programmes Case studies Peer exchange and learning Communities of practice support and brokering Cross-disciplinary peer learning projects Role-based forums Website guidance Online forums |
Inputs
Hours of support provided Participation of target audience in programmes, communitiesof Activity costs and expenditure Outputs Changes to leadership/ community of practice Shared strategies and resources Completed projects Changes to systems/ practcices Pre-test/ post-test measures Measures of staff engagement Student experience feedback Focus groups/ interviews Self-report surveys Attitudinal surveys Experiential stories Number of areas that have adopted new practices |
Institutional influence (organisational transformation) |
||
Organisational development
Organisational change Cultural change |
University forums
Staff retreats Policy development System enhancement Website development Guidelines Project management/ delivery Peer-learning projects |
Inputs
Hours of development Staff participation/ engagement Outputs Project outcomes Policy implementation/ adoption Cultural analyses/ surveys Action research Student engagement metrics Staff engagement metrics Institutional performance |
Voilà donc de quoi nous occuper pendant quelques mois jusqu’en octobre où nous pourrons échanger avec nos collègues sur ces sujets.
Stefani, L. (2010). Evaluating the Effectiveness of Academic Development: Principles and Practice. Taylor & Francis.