Post by Category : Teacher education

AI-supported Formative Evaluation of Teaching  0

Mario de Jonge (ICLON) and Erwin Veenstra (LLInC)

 

Traditionally, the SET is one of the most widely employed instruments in higher education for evaluating the quality of teaching (e.g., Hendry & Dean, 2002; Hounsell, 2003).  For a typical SET, after taking a course, students are asked to rate various aspects of the course (e.g., the clarity of the objectives, the usefulness of the materials, the methods of assessment) on a Likert scale. SET data is often the first and foremost source of information that individual teachers can use to evaluate both existing and new innovative teaching practices. SETs are often integrated in higher education professional development activities. For instance, at some faculties at Leiden university at Leiden University, SET results and their interpretation is an  integral part of the University Teacher Qualification (a.k.a., BKO). Starting out teachers are expected to critically reflect in teaching portfolios on the results of SETs for the classes they have taught. Furthermore, the results of SETs can function as a source of information for teachers’ supervisors to guide discussions in yearly Performance and Development Interviews, sometimes leading to recommended or enforced future professional development activities for teachers.

 

However, for some time now, the SET has been subject to scrutiny for a variety of reasons. First, based on an up-to-date meta-analysis, the validity of SETs seems questionable. That is, there appears to be no apparent correlation between SET scores and student learning performance at the end of a course (Uttl, 2017). In fact, when learning performance is operationalized as the added value of a teacher to the later performance of students during subsequent courses (Kornell & Hausman, 2016), the relationship can even be inversed (i.e., teachers with lower SET scores appear to be of more added value). One explanation for this finding is that making a course more difficult and challenging can result in lower SET scores, presenting teachers with a perverse incentive to lower the bar for their students to obtain higher scores on a SET (Stroebe, 2020).

 

Second, the intensive and frequent use of SETs can lead to a form of “evaluation fatigue” among students (Hounsell, 2003), sometimes resulting in mindless and unreliable evaluations of teaching (e.g., Reynolds, 1977; Uijtdehaage & O’Neal, 2015). As a case in point, a classic article by Reynolds (1977) reported how a vast majority of students in a medical course chose to evaluate a lecture that had been cancelled, as well as a video that was no longer part of the course. In a rather ironic reflection on these results Reynolds concluded that:

 

“As students become sufficiently skilled in evaluating films and lectures without being there,… …, then there would be no need to wait until the end of the semester to fill out evaluations. They could be completed during the first week of class while the students are still fresh and alert.”

 

Third, the results of student evaluations of teaching can be severely biased (e.g., Neath, 1996; Heffernan, 2022). For instance, in a somewhat tongue-in-cheek review of the literature, Neath (1996) listed 20 tips for teachers to improve their evaluations without having to improve their actual teaching. The first tip on the list: Be male. Apparently, research suggests that, in general, male teachers receive higher ratings on SETs compared to female teachers. In a more recent review of the literature, Heffernan (2022) goes on to argue that SETs can be subject to racist, sexist and homophobic prejudices, and biased against discipline and subject area. Also, SETs that also allow for a qualitative response can sometimes illicit abusive comments most often directed towards women and teachers from marginalized groups. As such, SETs can be a cause of stress and anxiety for teachers rather than being an actual aid to their development.

 

Fourth, although studies often emphasize the importance of SETs for supporting and improving the quality of education, the underlying mechanism remains elusive (Harrison et al., 2022). It is unclear how SETs contribute to improving the quality of teaching. To the contrary, teachers can often find it challenging to decide what actual changes to make based on aggregated SET data that is largely quantitative in nature (Henry & Dean, 2010).

 

In short, the continued use of SETs for evaluating the quality of teaching in higher education is difficult to justify. The findings reported in the literature indicate that the validity and reliability of the SET are questionable, and the value for educational practice appears to be limited. One could argue that sticking with the SET is more a tradition than it is evidence-informed practice. Perhaps universities mostly persist in the routine in lack of an equally (cost-)efficient and scalable alternative. In this blog, we delineate the development and pilot of one possible alternative.

 

The FET.  Late 2023, an Innovation Fund Proposal was awarded a small grant to develop an alternative approach for the evaluation of teaching. At the start of 2024, Mario de Jonge (researcher at ICLON), Boje Moers (project manager at LLInC), Anthea Aerts (educational consultant at LLInC), Erwin Veenstra, and Arian Kiandoost (developers/data analysts, LLInC) collaborated on the development and subsequent small-scale pilot of the FET (Formative Evaluation of Teaching).

 

The FET is designed to be more conducive for the improvement of teaching practices (formative, qualitative) and less focused on mere assessment of teaching (summative, quantitative). Like the traditional SET, the FET is fast, efficient and relatively inexpensive. However, the FET aims to give teachers clearer directions and qualitative input on how to improve their teaching.

 

In the first step of the FET survey (Figure 1), students are presented with a list of course aspects on which they can give feedback. Some of the aspects on the list are general (e.g., the methods of assessment), while some of them can be course-specific (e.g., learning objectives). Note that the course aspect pertaining to the teacher specifically asks students to direct feedback on their didactic approach. As noted, students’ evaluations of teaching can sometimes be prone to unconstructive abusive comments. By explicitly asking students to focus on the didactic approach, we hope to discourage these type of undesirable and unconstructive comments.

 

From the list of aspects, students are asked to select just one or two key aspects which they appreciated (i.e., tops), and one or two key aspects which they think could be improved upon (i.e., tips). With this design feature, we hope counter the threat of evaluation fatigue that is more likely to occur in more comprehensive surveys like the traditional SET that require students to evaluate each and every aspect of a course.

Figure 1. Screenshot of the first step in the FET survey where students are asked to select course aspects to give feedback on.

 

In the second step (Figure 2), after selecting one or two aspects as tips and tops, students are asked to write a short motivation for their respective selections. This set-up allows students to share their insights in a fast, efficient, and meaningful way.

Figure 2. Screenshot of FET step 2 where students are asked to elaborate on their selections.

 

After a given course has been evaluated, the FET output provides teachers with a ranking of aspects that were selected most frequently. Because selected aspects have also been enriched with qualitative textual input from students, teachers can engage in a focused review of those student contributions that are most relevant for improving their course (i.e., comments on aspects that were selected most frequently).

 

Going over the FET evaluation results should be a relatively straightforward task for those who teach small classes. However, for teachers with larger classes we anticipated that this could be a considerable burden. This is where AI comes into play. LLInC developer Erwin Veenstra and data analyst Arian Kiandoost worked on a way of complementing the raw data with an AI-generated summary of the main results. Specifically, we wanted to select a Large Language Model (LLM) that was capable of performing the task of summarizing the data in such a way that it is easy to process and interpret. We expected that, with the current level of sophistication of available LLMs, it should be possible to generate a high-quality descriptive summary of the qualitative data. It took a fair amount of experimentation, iteration, and team discussion about different possible LLMs, output formats, and the “right” prompt before we arrived at a model and approach capable of performing the task.

 

The LLM we ended up using was OpenAI’s GPT-4 API (OpenAI Platform, n.d.). Note that, in contrast to the non-API consumer service ChatGPT, the OpenAI API does not have the same privacy and security issues. That is, data sent to the OpenAI API is not used to train or improve the model. Still, because we ended up using a cloud-based LLM, the data were first anonymized before feeding it to the LLM. Also, we rearranged the survey data into a JavaScript Object Notation (JSON) format (JSON, n.d.) to make it easier for the LLM to group information per course aspect. The LLM was prompted in such a way that it recognized comments were grouped per course aspect, and that differences in magnitude should also be expressed in the summary (i.e., one Tip versus 10 Tops should not carry the same weight). Furthermore, we prompted the LLM to generate one synthesized integrated summarization for the tips and tops per course aspect. We found that this way of reporting helped to make explicit and nuance apparent contradictions in the data (e.g., half of the students stating one thing, the other half stating the opposite). After the summary was generated, any omissions in the output due to anonymization would be transformed back into the original values in the final report.

 

In the AI-generated summary, course aspects are presented in a descending order starting with the one that was selected most frequently. For each aspect, a short summary is generated to capture the overall gist of the student comments. Figure 3 shows a screenshot of an AI-generated summary and for one aspect, the working groups, of a course. Note that the summary only gives a descriptive synthesis of the students’ positive and negative, but the actual interpretation is left to the teacher. As is common knowledge, LLMs can sometimes be prone to “hallucinations”. We noticed that prompting the model to also provide an interpretation of the data, beyond what was in the text, increased the occurrence of hallucinations and also decreased the degree of reproducibility of the results. However, a simple more bare-bones LLM-generated descriptive summary provided what we felt was an accurate and reproducible representation of the data. To be sure, we prompted the LLM to supplement each summary with up to six “representative examples” (i.e., actual instances of student feedback) of tips and tops as a reference to the actual data. Furthermore, in the introduction text of to the AI-generated report, we encouraged teachers to cross-check with the actual raw data that was provided along with the summary, in case doubts would arise about the reliability.

 

Figure 3. Screenshot of an AI-generated summary for one of the course aspects in the FET (shared with permission from the participating teacher).

 

In the past couple of months, the FET has been piloted in different contexts at Leiden University, ranging from small-group settings such as an elective master class course (+-20 students) to a large-group setting such as a BA course (200+ students). The feedback from the participating teachers has been overwhelmingly positive. All teachers indicated wanting to use the FET again in the future and in their interactions with us, they were able to give multiple concrete examples of changes they intended to make in future iterations of their course. Based on the large BA course, the median time it took students to fill out the survey was around 2 minutes and 40 seconds, a duration we consider not to be too much of a burden for the students. Compared to the regular SET survey from a previous cohort, the FET survey produced much more qualitive student feedback in terms of the total number of student comments. Furthermore, although the average word count per comment that not differ much between the SET and the FET, students filling out the FET clearly put more effort into comments specifically directed at improving the course (i.e. Tips). Most important, after receiving and discussing the report, the participating teacher indicated having a high-degree of confidence in the reliability of the AI-generated summary  based on cross-checking with the raw data. In short, the preliminary results of our small scale pilot suggest that the FET can be a valuable tool for efficient collection of high-quality student feedback that is formative and more conducive to the improvement of teaching practices.

 

Outreach activities (workshops and presentations about the FET project) have now spiked the interest in the FET project within the university. In the next phase, we hope to get further support and funding to scale up the project and see if we can replicate our findings in a broader range of contexts and faculties. Also, for future direction, we aim to use an LLM that can be run on a local server (e.g., Mistral AI, n.d., Meta-Llama, n.d.). To run the larger versions of these kind of models, we need a more powerful computer than the one we had access to during the current project. However, such a machine has recently become available at LLInC.

 

As the project enters the next phase, we aim to investigate how the FET survey can be successfully implemented to improve educational design and how it can support teachers professional development activities. Furthermore, in our future endeavors we plan to also take into account the student perspective. This was outside the scope of the current project, but it is vital to consider the student perspective if the project is going to move forward and scale up.

 

Lastly, In the FET we purposefully chose to collect only qualitative data. As already noted abusive comments can sometimes enter into qualitative evaluation data and this can cause stress and anxiety among teachers. However, the qualitative evaluation data from our small-scale pilot did not seem to contain any student comments that could be considered abusive. Perhaps this was due to the design of the FET and the phrasing of the aspects in the list from which students could choose. Or perhaps it was simply due to the fact that students were aware that they were participating in a pilot project. However, even if abusive comments would enter into the FET, we expect that the LLM should be capable of filtering out such unconstructive comments. This is one thing that we would also want to test in the future (e.g., by contaminating evaluation data with a preconstructed set of abusive comments, and training the model to filter the data).

 

In conclusion, we believe the FET allows teachers to collect valuable feedback on the efficacy of their teaching in a fast, efficient, and meaningful way. Furthermore, the FET holds the potential for enhancing and enriching existing teacher professionalization activities as it can facilitate critical reflection on one’s own teaching practice.

 

References

Harrison, R., Meyer, L., Rawstorne, P., Razee, H., Chitkara, U., Mears, S., & Balasooriya, C. (2022). Evaluating and enhancing quality in higher education teaching practice: A meta-review. Studies in Higher Education, 47, 80-96.

 

Heffernan, T. (2022). Sexism, racism, prejudice, and bias: A literature review and synthesis of research surrounding student evaluations of courses and teaching. Assessment & Evaluation in Higher Education, 47, 144-154.

 

Hendry, G. D., & Dean, S. J. (2002). Accountability, evaluation of teaching and expertise in higher education. International Journal for Academic Development, 7, 75-82.

 

Hounsell, D. (2003). The evaluation of teaching. In A handbook for teaching and learning in higher education (pp. 188-199). Routledge.

 

JSON. (n.d.). https://www.json.org/json-en.html

 

Kornell, N., & Hausman, H. (2016). Do the best teachers get the best ratings?. Frontiers in psychology, 7, 570.

 

Meta-Llama. (n.d.). GitHub – meta-llama/llama3: The official Meta Llama 3 GitHub site. GitHub. https://github.com/meta-llama/llama3

 

Mistral AI. (n.d.). GitHub. https://github.com/mistralai/

 

Neath, I. (1996). How to improve your teaching evaluations without improving your teaching. Psychological Reports, 78, 1363-1372.

 

OpenAI Platform. (n.d.). https://platform.openai.com/docs/models

 

Reynolds, D. V. (1977). Students who haven’t seen a film on sexuality and communication prefer it to a lecture on the history of psychology they haven’t heard: Some implications for the university. Teaching of Psychology, 4, 82–83.

 

Stroebe, W. (2020). Student evaluations of teaching encourages poor teaching and contributes to grade inflation: A theoretical and empirical analysis. Basic and applied social psychology, 42, 276-294.

 

Uijtdehaage, S., & O’Neal, C. (2015). A curious case of the phantom professor: mindless teaching evaluations by medical students. Medical Education, 49, 928-932.

 

Uttl, B., White, C. A., & Gonzalez, D. W. (2017). Meta-analysis of faculty’s teaching effectiveness: Student evaluation of teaching ratings and student learning are not related. Studies in Educational Evaluation, 54, 22-42.

What is needed to be inclusive in teaching and research?  0

Source: unpslash: Braedon McLeod

Photo: unsplashed; Braedon McLeod

 

This month, the 10th Diversity & Inclusion Symposium took place, organized by the Diversity & Inclusion Expertise Office and the Faculty of Archaeology. For the small ICLON delegation that attended, the event highlighted how the questions, challenges and opportunities we face are not dissimilar to those experienced by colleagues elsewhere in our organization.

 

After 10 years of D&I policy, it has become clear that addressing equity, diversity and inclusion in meaningful and impactful way remains challenging. The symposium’s plenary speakers highlighted how the university is a place not just for research and knowledge sharing, but also where students and staff must learn to navigate complex and conflicting conversations. At ICLON, this is a topic that has been very much on our mind lately, as researchers, but also as teacher educators and trainers, and as an organization more broadly. How can ICLON research keep addressing these challenges? And what aspects of research and education should be emphasized in in order to contribute to an inclusive society?

 

Untold stories and questioning

The theme of the symposium was “Untold Stories.” In her opening keynote, Dr Valika Smeulders from the Rijksmuseum demonstrated how the museum navigates complex conversations effectively using heritage and fragile pasts. She explained about breaking existing frameworks and dominant narratives through multi-perspectivity and personal stories. In times of polarization, heritage can function to facilitate an open dialogue but also be a trigger for a heated debate.

 

This notion underpinned our recent research published in a history education journal. Collaborating with the Rijksmuseum van Oudheden, we developed a training for history teachers on addressing sensitive topics. Using concrete heritage objects and varied questions, teachers created space for students to share their perspectives and tell their stories. Following the intervention, teachers felt better-equipped to navigate such conversations in their classrooms, as observed in lessons addressing contentious issues like “Zwarte Piet”. Students and teachers were stimulated to ask questions. Certain questions can ‘heat up’ cooled down issues and hot topics can be ‘cooled down’ by questioning and not focusing on ‘the right answer’.

Photo: unsplashed Kind and Curious

 

Dealing with discomfort and doubt

Maintaining such dialogue and continuing to question can be difficult. In a workshop at the same symposium, by Ruben Treurniet from Civinc, participants engaged with each other anonymously using a tool that connects individuals with differing views. Through an online chat session, we exchanged thoughts on statements like “Debates about academic freedom should also involve the possibility of defending the right to not be inclusive.” A slight majority disagreed with this statement. The app encouraged us to ask each other questions, and provided an intriguing opportunity to converse with someone outside of one’s usual ’bubble’.

 

These anonymous discussions can foster some form of connection, and can be a useful tool in developing mutual understanding. In our professional context, however, we do not generally communicate through anonymous chat, but through face-to-face encounters, with their accompanying tone, body language and emotional load. Conversations on controversial topics can become tense and confrontational, and can actually reinforce relationships of power and dominance. Explicitly expressing feelings, doubt and judgments can also be also daunting for educators and researchers expected to exude authority, or who are anxious about repercussions if they do not maintain a ‘neutral’ standpoint. However, it is important that we, as researchers and educators, demonstrate the art of doubt and model how to deal with uncertainty.

 

Interdisciplinarity and positionality

Finally, it may be beneficial to revisit certain cooled-down topics to practice interdisciplinary thinking and multi-perspectivity. A historical perspective, as shown by Valika Smeulders, can offer various narratives, demonstrating how history is a construct accommodating diverse viewpoints. An issue that is ‘hot’ in the present could be ‘normal’ in the past and vice versa. Looking beyond your own time and discipline can be inspiring and helpful. Collaborating across disciplines broadens perspectives while requiring us to clarify our own viewpoint through questioning and being questioned. At the moment, this principle is being applied in ongoing research with history and biology teacher trainees.Source: unpslash: Braedon McLeod

 

Other current projects at ICLON are exploring culturally sensitive teaching, linguistic diversity, approaches to inclusion, and teacher, student teacher and teacher educator perspectives on equality, equity and social justice. These sensitive areas of research can create vulnerable situations for participants and researchers alike. They demand researchers’ critical awareness of their positionality, grappling with their values and giving space to non-dominant perspectives, while also contributing to authoritative knowledge and relevant practical applications.

 

Perhaps interdisciplinary and positionality could be a theme for a future symposium, bridging the diverse perspectives, experiences and expertise at ICLON and the university more widely. We could show what ICLON can offer regarding questioning, dealing with discomfort and interdisciplinarity, and open space for further dialogue at our university.

 

Acknowledgments

Many thanks to the Diversity and Inclusion Expertise Office and the Faculty of Archeology for organizing this symposium and thanks to Dr. Tessa Mearns for her helpful comments while writing this text.

 

Reference

Logtenberg, A., Savenije, G., de Bruijn, P., Epping, T., & Goijens, G. (2024). Teaching sensitive topics: Training history teachers in collaboration with the museum. Historical Encounters, 11(1), 43-59. https://doi.org/10.52289/hej11.104

 

The pedagogy of hope in times of crises  0

Photo: Akil Mazumber. on Pexels

Last week I visited Germany for my study around the climate crisis and the issue of hope. One German student said: Can’t we as teachers just tell students to become vegetarians to save the planet? 

What do you think, would it be a solution, or wise, to tell students what to eat, drink, vote, do or think in order to bring about change? I mean, shouldn’t we do  something as we know that studies about the effects of climate change on young people reveal that pessimism, guilt, hopelessness and fear are common in the new generation?

 

Bringing about change in times of the many present day crises with all the doom stories and anxiety is an interesting, yet challenging research topic. Interestingly,  precisely in the midst of complex crises, those who provide education have a crucial role: to make the new generation appear to the world as powerful and innovative (Arendt, 1958). To not reinforce fear or impose what to do or think, but have the new generation discover from hope that a different future is possible and that even a crisis includes profound problems-though complex and intractable- for which solutions can be found. A focus on hope is key!

 

Hope as a construct has received attention from many different angles, such as psychology, theology, philosophy and recently even famous primatologist and anthropologist Jane Goodall (2021). Yet, although many authors endorse the need and importance of hope, to date there has been little innovation in the ways in which hope can have a practical impact and lead to change, let alone in education. In my research project, hope has been incorporated into a pedagogy of hope. It holds several powerful design principles for a pedagogy of hope stemming from pilots in teacher education institutes in both the Netherlands and Germany and is now tested in the context of the climate crisis. Around this climate crisis, pre-service teachers are known to feel very committed to teaching the topic, but at the same time concerned and anxious about the climate themselves and ignorant in how to provide hopeful and effective teaching about the climate crisis in their secondary school internship classes (Bean, 2016).

 

The pedagogy of hope was implemented in a Dutch and German teacher education institute. The preliminary outcomes show that participants were able to formulate specific intentions that are both directed toward hope for the climate as well as easy to implement in their actual teaching in secondary education. Also, many intentions show to be action-oriented and participants often used their creativity to find non-traditional ways of conveying climate hope. We also found hindrances for teaching hopefully, such as not enough time, curriculum coverage and a lacking attention in textbooks for climate change and climate hope. Also, the different opinions that others could have could make it a controversial issue to teach in school.

 

On to the next steps!

 

Michiel Dam, researcher at ICLON, LTA teaching fellow

Hoopvol klimaatonderwijs – Universiteit Leiden

Vijf nieuwe Teaching Fellows benoemd – Universiteit Leiden

 

References

Arendt, H. (1958). The crisis in education. In H. Arendt (Ed.), Between the past and present. (pp. 101-124). Leuven/Apeldoorn: Garant.

Bean, H. J. (2016). Pre-Service Teachers and Climate Change: A Stalemate? Australian Journal of Teacher Education, 41(4).

Goodall, J. & Abrams, D. (2021). The Book of Hope: A Survival Guide for Trying Times. Celadon books: New York city, New York.

Rethinking Teacher Quality in University: Embracing Teacher Agency  2

Max Kusters & Arjen de Vetten

Introduction

How often have you referred to a teacher as ‘good’ or ‘bad’ in your school career? When assessing teacher quality, we often struggle with subjective judgments and varying criteria. Is a teacher considered good because they explain well? Or because the teacher’s students obtain high scores? Perhaps it depends on positive evaluations from students. In this research blog, we aim to redefine the way we assess the quality of university educators and propose a shift toward embracing teacher agency. We argue that educators should be seen as experts in their field, who can not only meet the needs of students but also foster innovation. Educators’ willingness to take responsibility and contribute to institutional progress can significantly foster a transformative educational environment. In this regard, educators transcend their traditional role as mere providers of education and instead become facilitators of educational innovation and development.

Shortcoming of current methods

The current methods of assessing the quality of university educators have been widely criticized. For instance, several studies raise concerns about the interpretation and usefulness of Student Evaluation of Teaching (SET) ratings. These studies revealed that SET ratings were significantly influenced by students’ perceptions of their educators, thereby calling into question the validity of this specific assessment tool (see Shevlin et al., 2000 and Spooren et al., 2013 for examples).

There are also educational concerns, for example, that current assessment methods do not contribute to educators’ professional development. Among other things, assessment methods are often criticized for providing little or no constructive feedback. Without this, educators may find it difficult to improve their teaching methods or address weaknesses. Moreover, critics argue that current assessments often fail to take into account the teaching context, such as subject matter, class size, level (bachelor’s or master’s), and student diversity and background. Each of these factors can significantly affect teaching methods and outcomes and should be considered when assessing educators. Moreover, current assessment methods neglect broader purposes of teaching, such as the value of mentorship and creating an inclusive learning environment.

In some institutions, however, there is already a focus on a more holistic approach that integrates different sources of feedback, such as peer evaluations and self-reflection, to gain a more accurate understanding of teacher effectiveness, for example during the University Teaching Qualification track. The ability to reflect on what works and what does not work, and to understand why, is invaluable to teacher quality. Therefore, universities play a crucial role in promoting these skills, as these skills must be recognized and valued by policy makers by reflecting them in assessments. A change to holistic assessment of educators emphasizes effective teaching and the long-term effect educators can have on student growth. Educators need to actively pursue their own development and make informed choices in any given situation, highlighting the significance of teacher agency in discussions about teacher quality.

Embracing Teacher Agency

Embracing teacher agency in the evaluation of teacher quality is crucial for fostering a culture of innovation, growth, and student-centered education. Teacher agency refers to the ability of educators to make intentional choices and take purposeful actions in their teaching practice. It involves educators’ capacity to initiate and control the learning environment, make informed pedagogical decisions in any given situation, and collaborate with colleagues and students. Teacher agency is often seen as a key factor in promoting effective teaching and learning in higher education. By recognizing and valuing teacher agency, universities can tap into the expertise and unique perspectives of their educators.

Moreover, teacher agency encourages continuous professional development. When educators have the autonomy to explore and experiment with different instructional strategies, they are more inclined to seek out new research, attend workshops, collaborate with colleagues, and reflect on their own teaching practices. This proactive approach to professional growth ultimately benefits both educators and students, as it promotes a culture of lifelong learning and innovation within the educational institution.

Embracing teacher agency also cultivates a sense of trust and collaboration between faculty members and administration. Rather than imposing rigid evaluation criteria, universities can create opportunities for open dialogue, feedback, and collaboration, allowing educators to take an active role in shaping their own professional growth and the overall direction of the institution.

Conclusion

In conclusion, embracing teacher agency is a powerful facilitator for elevating teacher quality in universities. By empowering educators to exercise their expertise, make informed decisions, and engage in continuous professional development, universities can foster a dynamic and student-centered educational environment that nurtures innovation, growth, and excellence in teaching and learning. It is essential to engage in an active debate about the assessment of educational quality and challenge the predominant reliance on quantitative evaluations such as SET. Recognizing the complexity of assessing teacher quality, we propose a paradigm shift towards valuing teacher agency in universities. By fostering a culture that empowers educators, promotes collaboration, and encourages continuous learning, we can unlock the potential for lasting educational reforms. Embracing teacher agency is crucial for assessing educators’ quality effectively. By involving educators in the assessment process and valuing their expertise, autonomy, and professional judgment, we can create a more meaningful evaluation system. Practically, this can be achieved through collaborative goal setting, self-reflection and self-assessment, peer observations and feedback, diverse assessment methods, and continuous professional development. By recognizing educators as professionals and empowering them to take an active role in their own assessment, we create a comprehensive and empowering process that benefits both educators and students. Embracing teacher agency thus not only benefits individual educators, but also fosters an educational environment characterized by its dynamic and student-centered nature. It promotes innovation, encourages growth and strives for excellence in both teaching and learning. And that’s what we call: good teaching!

References

Biesta, G., Priestley, M., & Robinson, S. (2017). Talking about education: Exploring the significance of teachers’ talk for teacher agency. Journal of curriculum studies49(1), 38-54.

Cherng, H. Y. S., & Davis, L. A. (2019). Multicultural matters: An investigation of key assumptions of multicultural education reform in teacher education. Journal of Teacher Education70(3), 219-236.

Harris, A., & Jones, M. (2019). Teacher leadership and educational change. School Leadership & Management39(2), 123-126.

Imants, J., & Van der Wal, M. M. (2020). A model of teacher agency in professional development and school reform. Journal of Curriculum Studies52(1), 1-14.

Kusters, M., van der Rijst, R., de Vetten, A., & Admiraal, W. (2023). University lecturers as change agents: How do they perceive their professional agency?. Teaching and Teacher Education, 127, 104097.

Shevlin, M., Banyard, P., Davies, M., & Griffiths, M. (2000). The validity of student evaluation of teaching in higher education: love me, love my lectures?. Assessment & Evaluation in Higher Education25(4), 397-405.

Spooren, P., Brockx, B., & Mortelmans, D. (2013). On the validity of student evaluation of teaching: The state of the art. Review of Educational Research83(4), 598-642.

Tao, J., & Gao, X. (2017). Teacher agency and identity commitment in curricular reform. Teaching and teacher education63, 346-355.

Meerdere perspectieven in het klaslokaal. Het balanceren tussen afstand en nabijheid.  0

Welke onderwerpen vinden docenten geschiedenis gevoelig? Enkele jaren geleden is deze vraag aan 81 docenten geschiedenis uit Nederland voorgelegd. Wat speelt in hun lessen? Op welke manier is dat gevoelig, en voor wie?

Veelgenoemde thema’s waren; a) verschillen en conflicten tussen islamitische en niet-islamitische mensen, b) kolonialisme en c) de Tweede Wereldoorlog en Holocaust. Een kwart van de docenten gaf aan geen enkel thema als gevoelig te ervaren. Volgens docenten worden onderwerpen gevoelig doordat leerlingen sterke en tegengestelde meningen in de les naar voren brengen. Daarnaast noemen ze de emotionele betrokkenheid van leerlingen en de angst om leerlingen te kwetsen.  Soms ligt de aanleiding voor gevoeligheid bij de wens van docenten om een onderwerp op een objectieve manier vanuit meerdere perspectieven te bespreken. Dat wordt niet altijd goed ontvangen door leerlingen. Tot slot wordt de onverschilligheid van leerlingen genoemd, bijvoorbeeld rond het thema kolonialisme en oorlog.

Docenten verklaarden voornamelijk dat de sociale en religieuze identificatie van leerlingen een rol speelt bij de gevoeligheid van de onderwerpen. Dit bleek uit uitspraken als ‘kruistochten worden door leerlingen uit het Midden-Oosten gezien als voorafspiegeling van westerse inmenging in het MO’ of ‘leerlingen met een moslim achtergrond voelen zich hier ongemakkelijk bij’.

Wat speelt er rond het thema Islam?

Naar aanleiding van deze uitkomsten waren we van mening dat het thema ‘lesgeven over de Islam’ nader onderzoek verdiende. Er is nog weinig zicht op de complexiteit van ervaringen van docenten met Islam gerelateerde vraagstukken. Daarom zijn er interviews afgenomen met zes docenten geschiedenis met verschillende achtergronden en werkend in verschillende contexten (wel/niet islamitisch). Docenten is gevraagd om te reflecteren op de uitkomsten van de vragenlijst. En er zijn open vragen gesteld over hun omgang met dit onderwerp in de klas en hen is een casus voorgelegd.

Alle docenten herkenden de gevoeligheid rond dit thema maar gaven tegelijkertijd aan dat ze in hun eigen onderwijs geen belemmeringen ervaarden. Docenten benadrukten ook het gevaar van een eenzijdig en een ongedefinieerd gebruik van de termen Islam en Moslims waardoor de diverse percepties rond dit thema onderbelicht blijven.

Drie dimensies

Factoren die een onderwerp gevoelig maken zijn erg afhankelijk van de betrokken personen. Persoonlijke waarden, opvattingen en identiteit van leerlingen en docenten, ingebed in een maatschappelijke context, kunnen zorgen voor complexe situaties in een klaslokaal. Daarbij zijn er veel verschillen tussen individuen en is het afhankelijk van tijd en plaats en context. Om deze complexiteit en de ervaringen van de geïnterviewde docenten te ontrafelen gebruikten we drie dimensies.

De eerste, meest voor de hand liggende, overkoepelende dimensie betreft de interpersoonlijke relatie tussen docent en de leerlingen. Nabijheid op deze dimensie is een belangrijke voorwaarde voor het creëren van een veilig klimaat voor het bespreken van gevoelige onderwerpen. Anderzijds kan er ook afstand worden gecreëerd in de relatie tussen docent en leerlingen als er grenzen en normen bewaakt moeten worden.

De tweede dimensie betreft de mate waarin docenten en leerlingen een gedeelde identiteit ervaren. Maatschappelijke en religieuze identificaties die docenten niet delen met hun leerlingen kunnen ongemakkelijk zijn. Daarnaast moeten docenten afwegen hoeveel ze van hun eigen identiteit delen met leerlingen en in welke mate ze een neutrale positie kunnen behouden. (Nationale) historische verhalen hebben een identiteitsvormende functie. Verhalen kunnen gevoelens van verbondenheid creëren maar ook buitensluiten en afkeer oproepen. Verschillende perspectieven op een historisch narratief kunnen dus botsen met een behoefte aan een gedeeld verhaal, waarin ook een docent niet geheel onafhankelijk kan zijn.

De derde dimensie betreft de mate waarin leerlingen en docenten dezelfde bronnen van kennis gebruiken bij het construeren van bovengenoemde verhalen over het verleden. Vanuit deze dimensie kan de gevoeligheid van een onderwerp geduid worden door verschillen in brongebruik en de manier waarop deze bronnen gebruikt worden. Met betrekking tot de Islam is er bijvoorbeeld weinig of eenzijdige kennis in de lesboeken. Daarnaast kunnen leerlingen en docenten bronnen van kennis verschillend benaderen, wat voor spanningen in de klas kan zorgen. Verschillende omgang met bronnen kan spelen bij complottheorieën, fake news en de spanning tussen wetenschap en religie.

Waar staan de zes docenten?

Over het algemeen bleken de dimensies bruikbaar om de uiteenlopende percepties en ervaringen van docenten in kaart te brengen. We kregen zo een genuanceerder beeld van mogelijke gevoeligheden rond islam-gerelateerde kwesties in verschillende contexten.

Op interpersoonlijk vlak viel op dat docenten nabijheid creëren door persoonlijk contact en betrokkenheid maar ook bewust afstand bewaren zodat leerlingen de kans krijgen om hun eigen meningen te ontwikkelen. Docenten benoemden hierbij ook verschil in context (onder- en bovenbouw).

Uit de analyse bleek dat docenten zich bewust waren van hun verschillende identiteiten en hier flexibel mee konden omgaan en bepaalde aspecten deelden met hun leerlingen. Eén van de docenten kon bijvoorbeeld zijn eigen achtergrond (Moslim, regionale identiteit en migratie) inzetten in de klas. Het onderscheid tussen religieus/niet-religieus en Islamitisch/niet-Islamitisch bleek niet echt aan de orde te zijn bij het typeren van deze dimensie.

Met betrekking tot brongebruik gaven alle docenten aan op een kritische manier met bronnen om te gaan. Drie docenten ervaren dat ze dit delen met hun leerlingen (vooral bovenbouw), terwijl de anderen wat meer afstand ervaarden met betrekking tot het brongebruik van leerlingen. Deze docenten ervaren ongemak door het onkritisch gebruik van (religieuze) bronnen door leerlingen.

De zes docenten zijn op verschillende manieren te positioneren op de dimensies, sterk afhankelijk van het onderwerp en de context waarin ze lesgeven. We denken dat bewust omgaan met deze dimensies docenten kan helpen met het balanceren tussen afstand en nabijheid en hun eigen positie daarin. We denken ook dat de kennisdimensie explicieter aan de orde kan worden gesteld.

Vervolg

In de lerarenopleiding verkennen we verdere mogelijkheden om met deze dimensies docenten in opleiding bewuster te maken van de mogelijkheden om gevoelige onderwerpen bespreekbaar te maken. Vooral op het gebied van brongebruik zijn we aan het ontdekken hoe verschillende bronnen van kennis vanuit verschillende benaderingen kunnen worden bevraagd. Een voorbeeld is een onlangs begonnen project waarbij we docenten geschiedenis en biologie vanuit hun vak perspectieven controversiële thema’s zoals evolutie en gender laten bevragen. Daarover in een volgende blog meer.

Verder lezen:

Savenije, G. M., Wansink, B. G. J., & Logtenberg, A. (2022). Dutch history teachers’ perceptions of teaching the topic of Islam while balancing distance and proximity. Teaching and Teacher Education, 112, [103654]. https://doi.org/10.1016/j.tate.2022.103654

 

A disciplinary literacies perspective on subject teaching (Or: Why every teacher is not a language teacher)  0

As I have written here before, I am a great fan of the possibilities offered by Content and Language Integrated Learning (CLIL). Having taught multiple languages in various contexts in my time, there is something very appealing about what Kees de Bot once referred to as “The Sneaky Way” (2007: 276) of helping learners acquire a language while using it to focus on curriculum content. To those with a background in second language acquisition, it just makes so much sense!

If it makes so much sense, why is it so hard for CLIL teachers to live up to the expectations outlined in the theoretical and practical literature on CLIL? In the Dutch context, several studies have drawn attention to the apparent shortcomings of CLIL classroom practice (e.g. de Graaff et al. 2007, Koopman et al. 2014, van Kampen et al. 2017, Oattes et al. 2018) when held up against models based on theories of language pedagogy and second language acquisition. Clearly, for the teachers involved in those studies, CLIL as we understand it does not make as much sense as it does to me.

 

Every teacher a language teacher?

As a teacher educator in the World Teachers Programme, I have the privilege of working with enthusiastic and talented new teachers from a range of disciplines. While collaborating on a forthcoming publication recently, Liz Dale and I noted that the student teachers we each work with are most receptive to the idea of CLIL when we approach it in a way that leaves space for their disciplinary identity (Dale et al., 2018). Rather than preaching the adage “every teacher is a language teacher” and asking students of biology, history or computer science to conform to the ideals that title implies, I find it more helpful to ask students to consider the roles of language and communication as integral aspects of their existing expertise in their subject. “Every discipline has its own ways of thinking, behaving and communicating” seems a more constructive approach that does justice to teachers’ real areas of expertise. As a teacher educator, it is not my job to turn all teachers into language teachers, but to help them recognise and make salient to learners (Ball et al., 2015) the language and culture of their subject in ways appropriate to their age and level of readiness (see Coyle & Meyer’s (2021) Lego model for an illustration).

 

A new perspective on perspectives

This idea that each subject has its own “culture” (Coyle, 2015) is a crucial aspect of disciplinary literacies. This is a similar view to that taken in Fred Janssen’s perspective-oriented education, which takes as its basis the idea that different disciplines view phenomena through different lenses. What disciplinary literacies adds to the discussion, however, is the idea that different perspectives are communicated in different ways and through different means (or ‘text types’). A social scientist is likely to use different sources and produce different types of output than a mathematician or an art historian, and will therefore need support from a teacher who is an expert in the genres of their subject. This applies in foreign-language CLIL settings, but also in mainstream settings: after all, who speaks ‘Geography’ or ‘Physics’ as their home language?

 

So what about the language teacher?

Does this mean that language teachers have to relinquish their dream of teaching language “The Sneaky Way”? I think not. In fact, I would argue that a disciplinary literacies approach finally offers language teachers the opportunity to realise that dream within their own subject. Language teachers are experts in content areas such as literature, linguistics, culture and intercultural communication (Meesterschapsteam mvt, 2022). Rethinking language curricula around content such as these would reposition language subjects as disciplines in their own right, with their own perspectives and disciplinary literacies (see also an earlier post on this).

 

Next steps

Having established that teachers are well-equipped to support development of disciplinary literacies from their own subject perspectives without compromising their disciplinary identity, the question remains as to how best to support them in finding the best ways to do so. Do you have ideas for how to approach this or are you interested in carrying out research? Get in touch with your ideas via t.l.mearns@iclon.leidenuniv.nl.

 

And… Join us at World CLIL 2022!

Want to connect with colleagues in the international CLIL community? On 7-8 July this year, ICLON will team up with Nuffic to host the World CLIL conference in the Hague. We promise a packed programme with a wide range of workshops on location and over a hundred presentations and symposia available to both on-location and online participants. Registration is open until the 15th of June, but why wait? See www.worldclil.com for more information.

 

References

Ball, P., Kelly, K., & Clegg, J. (2015). Putting CLIL into Practice. Oxford: Oxford University Press.

 

de Bot, K., 2007. Language Teaching in a Changing World. The Modern Language Journal, 91(2), pp. 274-276.

 

Coyle, D. (2015). Strengthening integrated learning: Towards a new era for pluriliteracies and intercultural learning. Latin American Journal of Content and Language Integrated Learning, 8(2), 84-103, doi:10.5294/laclil.2015.8.2.2

 

Coyle, D., & Meyer, O. (2021). Beyond CLIL: Pluriliteracies Teaching for Deeper Learning. Cambridge UK: Cambridge University Press.

 

Dale, L., Oostdam, R., & Verspoor, M. (2018). Searching for identity and focus: towards an analytical framework for language teachers in bilingual education. Journal of Bilingual Education and Bilingualism. 21(3), 366-383 DOI: 10.1080/13670050.2017.1383351

 

de Graaff, R., Koopman, G. J., Anikina, Y., & Westhoff, G. (2007). An Observation Tool for Effective L2 Pedagogy in Content and Language Integrated Learning (CLIL). International Journal of Bilingual Education and Bilingualism, 10(5), 603-624. doi:10.2167/beb462.0

 

van Kampen, E., Meirink, J., Admiraal, W., & Berry, A. (2017). Do we all share the same goals for content and language integrated learning (CLIL)? Specialist and practitioner perceptions of ‘ideal’ CLIL pedagogies in the Netherlands. International Journal of Bilingual Education and Bilingualism, Online first. doi:10.1080/13670050.2017.1411332

 

Koopman, G. J., Skeet, J., & de Graaff, R. (2014). Exploring content teachers’ knowledge of language pedagogy: a report on a small-scale research project in a Dutch CLIL context. The Language Learning Journal, 42(2), 123-136. doi:10.1080/09571736.2014.889974

 

Meesterschapsteam mvt (2022). Visie op de toekomst van het curriculum Moderne Vreemde Talen. Accessible via https://modernevreemdetalen.vakdidactiekgw.nl/wp-content/uploads/sites/6/2022/04/Basistekst-visie-4.4.pdf

 

Oattes, H., Oostdam, R., De Graaff, R., Fukkink, R., & Wilschut, A. (2018). Content and Language Integrated Learning in Dutch bilingual education. How Dutch history teachers focus on second language teaching. Dutch Journal of Applied Linguistics, 7(2), 156-176. doi:10.1075/dujal.18003.oat

Mag een leraar weer leraar zijn?  0

Studenten moeten hybride worden opgeleid om maar niet in het fuik van het leraarschap terecht te komen. Blijkbaar is het leraarschap iets heel ergs wat je wel een paar jaar kunt doen, maar je moet vooral je opties open houden om aan het leraarschap te kunnen ontsnappen. Maar zou een leraar het niet geweldig moeten vinden om bij te mogen dragen aan de ontwikkeling van jonge mensen? En zou onze maatschappij niet juist het leraarschap hogelijk moeten waarderen in plaats van als een fuik te bestempelen?

Tevredenheid leraren
Deze zomer heb ik me eens verdiept in de data van de Teaching and Learning International Survey om te kijken wat leraren tevreden leraren maakt. In deze survey, die in 2018 is afgenomen (en daarvoor in 2008 en 2013), is veel relevante informatie bevraagd over gevolgde opleidingen en professionalisering van leraren, hun motivatie, hun ervaringen met het leraarschap en werkomstandigheden in school. Ik heb uitsluitend naar de data van de leraren in het primair onderwijs en de onderbouw van het voorgezet onderwijs in Nederland en Vlaanderen gekeken omdat deze data beschikbaar zijn. En daar kwam een eenduidig plaatje uit, voor primair en voortgezet onderwijs, en voor Nederland en Vlaanderen. Tevredenheid van leraren wordt vooral bepaald door zaken die een leraar leraar maakt: hun motivatie voor het leraarsberoep en de werkomstandigheden in school.

Motivatie voor het leraarsberoep
Wat betreft hun motivatie voor het leraarsberoep zijn tevreden leraren vooral leraren die het maatschappelijke nut van het leraarschap erkennen en willen bijdragen aan de ontwikkeling van jonge mensen. Tevreden leraren zijn veelal ook leraren die het leraarschap als eerste beroepskeuze hadden. Salaris, vaste baan en prettige werktijden blijken geen verschillen te verklaren in tevredenheid van leraren met hun beroep.

Werkomstandigheden in school
Ook goede werkomstandigheden in school maken leraren meer tevreden. Vooral een schoolklimaat waarin sprake is van een veilige en respectvolle leer- en werkomgeving maakt veel uit. Maar werkomstandigheden kunnen ook negatief uitpakken, zoals ervaren barrières voor het volgen van professionele ontwikkeling en gevoelens van stress en spanning door onder meer werkdruk en veel andere taken dan het verzorgen van onderwijs.

Dus?
Leraren zijn tevreden als zij leraar mogen zijn, zij bij kunnen dragen aan de ontwikkeling van jonge mensen, zij zich vooral met onderwijs kunnen bezighouden en hun beroep wordt gewaardeerd. Hybride loopbanen kunnen studenten aantrekken voor de lerarenopleiding en tijdelijk een lerarentekort oplossen, maar blijven deze leraren wel behouden voor het beroep? Zouden we ons niet veel meer moeten richten op de zaken die juist voor het leraarschap van belang zijn in plaats van dit te zien als een fuik waar je vooral uit moet geraken? En dus meer op waarderen en erkennen van het leraarsberoep? Daarmee wordt het leraarschap voor studenten een aantrekkelijke optie en voor leraren een waardering voor wat zij doen. De keuze om juist het leraarschap centraal te stellen draagt op termijn meer bij aan het terugdringen van het lerarentekort dan het aantrekken van nieuwe doelgroepen die binnen no time het leraarschap weer vaarwel hebben gezegd.

Mag een leraar weer gewoon een leraar zijn?

Op naar 40 jaar inspirerend voor de klas  0

Het lerarentekort in het primair en voortgezet onderwijs is dagelijks in het nieuws. Scholen sturen vertwijfeld klassen naar huis, onderwijstijd wordt ingekort en beleidsmakers zijn ten einde raad. Lerarenopleidingen worden aangespoord meer beginnende leraren af te leveren, maar mede door het imago van docentschap lukt dat maar mondjesmaat. Je hoort maar weinig over het behoud van leraren voor het beroep, en dan met name van de oudere leraar.

 

Oudere leraren
In de discussies worden oudere leraren steevast weggezet als een groep verzuurde leraren die niets meer willen en geen click meer hebben met hun leerlingen. Uit onder meer de dissertatie van Veldman (2017) naar arbeidstevredenheid van oudere leraren blijkt dat dit maar een klein deel van de waarheid is. Het directe contact met leerlingen is voor de ene leraar wel een bron van tevredenheid met het beroep, maar voor de andere leraar een reden om het aantal uren lesgeven te verminderen, een andere functie in school te ambiëren of het onderwijsberoep zelfs te verlaten.

 

Vier typen
Op basis van gegevens over hun relatie met leerlingen en arbeidstevredenheid in het algemeen onderscheidt Veldman vier typen oudere leraren (met tussen haakjes het aandeel in de gehele steekproef):
1. Positieve overschatters (43%)
2. Positieve onderschatters (36%)
3. Negatieve onderschatters (9%)
4. Negatieve realisten (12%)

 

Positieve overschatters
Positieve overschatters hebben geen reëel beeld van de kwaliteit van de relatie met hun leerlingen. Zij overschatten deze, en dan met name het creëren van een veilig en positief leerklimaat voor leerlingen. Wel zijn zij mede daardoor tevreden met hun werk, met name over de aard van het werk en de ondersteuning door het management. Zij prenten zichzelf in een goede relatie met leerlingen te hebben.

 

Positieve onderschatters

Ook positieve onderschatters hebben geen reëel beeld van de kwaliteit van de relatie met hun leerlingen. Zij onderschatten de kwaliteit van hun relatie met leerlingen, maar leerlingen waarderen de relatie wel positiever dan bij de Positieve overschatters. Dat geldt met name voor het creëren van een veilig en positief leerklimaat voor leerlingen. Mede daardoor zijn de positieve onderschatters tevreden met hun werk, met name over de aard van hun werk en de relatie met collega’s in school. Zij wapenen zich tegen mogelijk negatieve beelden van hun leerlingen.

 

Negatieve onderschatters
En ook de negatieve onderschatters hebben geen reëel beeld van de kwaliteit van de relatie met hun leerlingen. Zij onderschatten hun relatie met leerlingen, die hen vergelijkbaar waarderen als de Positieve overschatters. Verder zijn zij ontevreden over hun werk en dan met name over de aard van het werk en de werkomstandigheden. Zij leggen de schuld van hun ontevredenheid vooral bij externe factoren in school en bij de overheid.

 

Negatieve realisten
De negatieve realisten, ten slotte, vormen de enige groep leraren met een reëel beeld van de kwaliteit van de relatie met hun leerlingen. Zowel de leraren als hun leerlingen waarderen de relatie laag, terwijl de leraren ook weinig ambities hebben op het vlak van de relatie met leerlingen. Verder zijn deze leraren ontevreden over hun werk en dan met name over de aard van hun werk. Over andere zaken, zoals relatie met collega’s, werkomstandigheden en ondersteuning door het management, zijn zij tevreden. Zij hechten meer waarde aan andere aspecten van het beroep van docent dan het direct onderwijzen van leerlingen.

 

Dus…
Ongeveer 10% van de oudere leraren uit de typologie lijkt op het stereotype beeld dat wordt geschetst. Maar voor de overige 90% van de oudere leraren lijken er voldoende mogelijkheden om hen voor het beroep van leraar te behouden. Oudere leraren kunnen worden begeleid in het helder krijgen wat hen nog drijft als leraar (negatief realisten), in het formuleren van meer realistische ambities waardoor zij meer werkvreugde halen uit hun relatie met leerlingen (negatieve onderschatters) of beter gebruik maken van de kwaliteit van de relatie (positieve overschatters), en in het verkrijgen van meer zelfvertrouwen in de relatie met hun leerlingen (positieve onderschatters).

Meer ondersteuning en facilitering van oudere leraren kunnen oudere leraren helpen om de interactie met hun leerlingen te herwaarderen, een weloverwogen keuze te maken om vanuit een positieve motivatie iets anders te gaan doen dan lesgeven en (opnieuw) te motiveren voor het beroep van docent. In beleidsmaatregelen rond het reduceren van het lerarentekort zou hiervoor veel meer aandacht moeten komen.

 

Literatuur
Admiraal, W., Veldman, I., Mainhard, T., & Tartwijk, J van. (2019). A typology of veteran teachers’ job satisfaction: Their relationships with their students and the nature of their work. Social Psychology of Education, 22(2), 337-355.

Veldman, I. (2017). Stay or leave? Veteran teachers’ relationship with students and job satisfaction. Academisch proefschrift Universiteit Leiden.

Denk na over onderzoek in de universitaire lerarenopleiding!  0

De universitaire lerarenopleidingen (ulo’s) liggen onder vuur. Dat is niet voor het eerst. De oorzaak voor dit terugkerende verschijnsel is dat het opleiden van docenten – net zoals onderwijs in het algemeen- simpel lijkt, maar het niet is. De meest recente discussie over kwaliteit van de ulo’s lijkt zich toe te spitsen op het onderzoek in de opleiding. Nu de postgraduate opleiding niet doorgaat – waarin geen onderzoek als eindwerk was opgenomen- staat het onderzoek in de masteropleiding weer onder druk. Het zou geen masterniveau hebben of kunnen hebben, is het verhaal. Nu is er zoals geschreven altijd discussie, maar het wordt menens wanneer beleidsmakers zich ermee bemoeien, en helemaal wanneer de politiek dat doet.

Waarom leren doen van onderzoek?

Deze gedachten worden gevoed door opvattingen wat onderzoek in een universitaire opleiding zou moeten zijn. Hierbij wordt het onderzoek vergeleken met de masterthese in een vakmaster, Onderwijsstudies of Pedagogiek. Maar deze masters zijn gericht op studenten die zich ontwikkelen tot wetenschappelijk onderzoeker in een bepaald domein. De ulo is een academische beroepsopleiding die studenten opleidt tot docenten die in staat zijn hun onderwijs te onderzoeken en op basis daarvan te verbeteren. Ofwel het primaire doel van het onderzoek in de ulo is niet het genereren van kennis, maar het verbeteren van de onderwijspraktijk.

Drie soorten kennis nodig

Wellicht kan het onderscheid van Cochran-Smith en Lytle (1999) in drie soorten kennis hierbij van dienst zijn. Het verwerven van deze drie soorten kennis speelt een cruciale rol in het leren van het beroep van docent:
Knowledge for practice – alle kennis en inzichten over schoolvakinhoud, leren en instructie, pedagogiek, etc. die is gebaseerd op wetenschappelijk onderzoek en theorievorming.
Knowledge in practice – alle kennis en inzichten over dezelfde onderwerpen, maar nu gebaseerd op praktijkervaringen en (kritische) reflecties op die praktijk.
Knowledge of practice – alle kennis en inzichten die zijn opgedaan door onderzoek naar de eigen onderwijspraktijk en die van collega’s, met als doel meer te weten te komen van een bepaalde praktijk, waarbij kennis uit wetenschappelijk onderzoek wordt toegepast en als spin-off ook wordt vermeerderd.

Knowledge for practice leren studenten in de cursusonderdelen die worden verzorgd in het opleidingsinstituut, knowledge in practice tijdens de begeleide praktijkervaringen in school en knowledge of practice in het onderzoek dat de studenten tijdens de opleiding doen. Hiermee vormt het onderzoek in de lerarenopleiding ook een natuurlijke brug tussen de inzichten die worden opgedaan op het opleidingsinstituut en de ervaringen in de schoolpraktijk als docent.

Hoe ziet dat onderzoek eruit?

Dat betekent dat het onderzoek van studenten in de lerarenopleiding is ingekaderd door inzichten die zijn verkregen door wetenschappelijk onderzoek en eerdere theorievorming, maar ingegeven door vragen die zij zelf hebben over hun onderwijspraktijk. Tevens moet het onderzoek zodanig zijn opgezet dat het informatie oplevert die studenten helpt bij hun onderwijspraktijk. Effectstudies met (quasi-)experimentele onderzoeksdesigns of grootschalig surveyonderzoek mogen in veel wetenschappelijk onderwijsonderzoek usance zijn, voor een docent-in-opleiding levert dergelijk onderzoek dikwijls weinig aanwijzingen op om de onderwijspraktijk te verbeteren. Probleemanalyse, actie-onderzoek of ontwerponderzoek leveren vaak wel de benodigde informatie op en doen niets af aan het masterniveau van het onderzoek. Integendeel, het lijkt simpel, maar dat is het niet.

Dus

Stop met onzinnige vergelijkingen en ga aan de slag met de specifieke eisen die het opleiden van docenten stelt.

Ruimte voor excellentie?  0

Iedere professional heeft ruimte nodig om goed te kunnen functioneren, of niet?

Van sommige professionals wordt zelfs verwacht dat zij deze ruimte zelf creëren en benutten. De beginnende docenten in het Eerst-de-Klas traject  en het OnderwijsTraineeship  zijn hiervan een voorbeeld. De overheid heeft deze speciale leerwerktrajecten van de lerarenopleiding opgezet om excellente academici te enthousiasmeren voor het onderwijs. In het voortgezet onderwijs zouden deze academici een optimale ruimte dienen te creëren en benutten om hun baan uitdagend te houden voor zichzelf en een innovatieve wind te laten waaien in de school. Mooie woorden worden gebruikt in de omschrijving van deze programma’s. Zo is er bij het Eerst De Klas traineeship een leiderschapsprogramma ‘dat is vormgegeven door de meest toonaangevende organisaties in Nederland.’ Het OnderwijsTraineeship biedt naast de lerarenopleiding ‘masterclasses die je internsief laten kennis maken met de volledige breedte van het onderwijsveld’.

Toch lijkt er een belangrijk mechanisme over het hoofd te worden gezien. De docenten in beide trajecten starten namelijk als beginners in schoolorganisaties en hebben tijd nodig om de organisatie te leren kennen en de eigen positie binnen de ‘gevestigde orde’ te zien. Een begrip als enculturatie past goed bij deze fase. De balans tussen ruimte creëren, benutten en krijgen is daarmee een belangrijk onderdeel van deze initiatieven. Wij (Jacobiene Meirink & Anna van der Want) zijn heel benieuwd naar hoe de huidige docenten in het EDK en Onderwijstraineeship de balans tussen creëren, benutten en krijgen van ruimte ervaren! In een door ProBO gesubsidieerd project onderzoeken we deze thematiek.

Voor meer informatie zie www.professioneleruimte.info