A framework for designing technologically supported adaptive teaching and learning processes
A framework for designing technologically supported adaptive teaching and learning processes
Abstract
Based on a framework for designing technologically supported adaptive instructional settings, our conceptual contribution describes implications on pedagogical-didactical, diagnostic as well as technological levels. The latter aspect is underpinned with the results of a review of available systems and their functions to support data-driven decision making. A hypothesis-driven diagnostic approach to adaptive instructional design requires a broader understanding of “heterogeneity” on the pedagogical-didactical level, which is to be mapped accordingly on the diagnostic and technological levels.
References
- 1. Achtenhagen, F. (2012). The curriculum-instruction-assessment triad.
Empirical research in vocational education and training, 4 (1), 5-25. - 2. Agirdag, O. / Van Avermaet, P. / Van Houtte, M. (2013). School segregation and math achievement: a mixed-method study on the role of self-fulfilling prophecies.
Teachers College Record, 115 (3), 1-50. - 3. Aufschnaiter, C. v. / Cappell, J. / Dübbelde, G. / Ennemoser, M. / Mayer, J. / Stiensmeier-Pelster, J. , et al. (2015). Diagnostische Kompetenz. Theoretische Überlegungen zu einem zentralen Konstrukt der Lehrerbildung.
Zeitschrift für Pädagogik, 61 (5), 738-758. - 4. Bach, A. / Schaub, Ch. (2020). Inklusion und Heterogenität in der bautechnischen Berufsbildung. Ein Beitrag zur theoretischen Fundierung und domänenspezifischen Analyse.
Zeitschrift für Berufs- und Wirtschaftspädagogik, 116 (4), 578-613. - 5. Baethge, M. / Buss, K.-P. / Lanfer, C. (2003).
Konzeptionelle Grundlagen für einen Nationalen Bildungsbericht: Berufliche Bildung und Weiterbildung / Lebenslanges Lernen . http://www.sofi-goettingen.de/fileadmin/user_upload/Nationaler_Bildungsbericht.pdf, abgerufen am 07.02.2021. - 6. Black, P. / Wiliam, D. (1998). Assessment and classroom learning.
Assessment in Education: Principles, Policy & Practice, 5 (1), 7-74. - 7. Bönsch, M. (2008).
Intelligente Unterrichtsstrukturen. Eine Einführung in die Differenzierung . Hohengehren: Schneider. - 8. Brühwiler, C. / Blatchford, P. (2011). Effects of class size and adaptive teaching competency on classroom processes and academic outcome.
Learning and Instruction, 21 (1), 95-108. - 9. Cha, H. J. / Ahn, M. L. (2014). Development of design guidelines for tools to promote differentiated instruction in classroom teaching.
Asia Pacific Education Review, 15 (4), 511-523. - 10. Corno, L. / Snow, R. E. (1986). Adapting teaching to individual differences among learners. In M. C. Wittrock (Ed.),
Handbook of research on teaching (pp. 605-629). New York, NY: MacMillan. - 11. Datnow, A. / Hubbard, L. (2016). Teacher capacity for and beliefs about data-driven decision making: A literature review of international research.
Journal of Educational Change, 17 (1), 7-28. - 12. Denn, A.-K. / Hess, M. / Lipowsky, F. (2017). Hängen das Leistungsniveau und die Leistungsheterogenität von Grundschulklassen mit dem Anteil lehrerzentrierter Unterrichtsphasen im Deutsch- und Mathematikunterricht zusammen? Ergebnisse der PERLE-Studie.
Zeitschrift für Grundschulforschung, 10 (1), 162-176. - 13. Dunn, K. E. / Mulvenon, S. W. (2009). A critical review of research on formative assessment: The limited scientific evidence of the impact of formative assessment in education.
Practical Assessment, Research & Evaluation, 14 (7), 1-11. - 14. Edelenbos, P. / Kubanek-German, A. (2004). Teacher assessment: the concept of ‚diagnostic competence‘.
Language Testing, 21 (3), 259-283. - 15. Elmahdi, I. / Al-Hattami, A. / Fawzi, H. (2018). Using Technology for Formative Assessment to Improve Students’ Learning.
The Turkish Online Journal of Educational Technology, 17 (2), 182-188. - 16. Espin, C. A. / Saab, N. / Pat-El, R. / Boender, P. D. M. / Van der Veen, J. (2018). Curriculum-Based Measurement progress data: Effects of graph pattern on ease of interpretation.
Zeitschrift für Erziehungswissenschaft, 21 (4), 767-792. - 17. Evertson, C. / Anderson, L. / Brophy, J. (1978).
The Texas Junior High School Study: Final report of process-outcome relationships . Austin: Research and Development Center for Teacher Education, The University of Texas at Austin. - 18. Faber, J. M. / Glas, C. A. W. / Visscher, A. J. (2018). Differentiated instruction in a data-based decision-making context.
School Effectiveness and School Improvement, 29 (1), 43-63. - 19. Faber, J. M. / Luyten, H. / Visscher, A. J. (2017). The effects of a digital formative assessment tool on mathematics achievement and student motivation: Results of a randomized experiment.
Computers & Education, 106 , 83-96. - 20. Faber, J. M. / Visscher, A. J. (2018). The effects of a digital formative assessment tool on spelling achievement: Results of a randomized experiment.
Computers & Education, 122 , 1-8. - 21. Fehling, C. / Kollmann, T. / Lackes, R. / Leymann, F. / Siepermann, M. (2013).
Kompakt-Lexikon Wirtschaftsinformatik. 1.500 Begriffe nachschlagen, verstehen, anwenden . Wiesbaden: Springer Gabler. - 22. Freeman, D. J. / Brookhart, S. M. / Loadman, W. E. (1999). Realities of teaching in racially / ethnically diverse schools: Feedback from entry level teachers.
Urban Education, 34 (1), 89-114. - 23. Fuller, J. / Dawson, K. M. (2017). Student Response Systems for Formative Assessment Literature-Based Strategies and Findings from a Middle School Implementation.
Contemporary Educational Technology, 8 (4), 370-389. - 24. Glock, S. / Kovacs, C. / Pit-Ten Cate, I. (2018). Teachers’ attitudes towards ethnic minority students: Effects of schools’ cultural diversity.
British Journal of Educational Psychology, 89 (4), 616-634. - 25. Gresham, F. M. (1991). Conceptualizing behavior disorders in terms of resistance to intervention.
School Psychology Review, 20 (1), 23-36. - 26. Gresham, F. M. (2002). Responsiveness to Intervention: An Alternative Approach to the Identification of Learning Disabilities. In R. Bradley / L. Danielson / D. P. Hallahan (Eds.),
Identification of Learning Disabilities: Research to Practice (pp. 467-519). Mahwah: Erlbaum. - 27. Gummer, E. / Mandinach, E. B. (2015). Building a conceptual framework for data literacy.
Teachers College Record, 117 (4), 1-22. - 28. Harlen, W. (2008). Editor’s introduction. In W. Harlen (Ed.),
Student Assessment and Testing (pp. 19-46). London: SAGE. - 29. Heid, H. (1992). Was „leistet“ das Leistungsprinzip?
Zeitschrift für Berufs- und Wirtschaftspädagogik, 88 (2), 91-108. - 30. Heinrichs, K. / Reinke, H. (Hrsg.) (2019).
Heterogenität in der beruflichen Bildung im Spannungsfeld zwischen Erziehung, Förderung und Fachausbildung . Bielefeld: wbv. - 31. Helmke, A. / Helmke, T. / Lenske, G. / Pham, G. / Praetorius, A.-K. / Schrader, F.-W. / Ade-Thurow, M. (2018).
Unterrichtsdiagnostik mit EMU - Evidenzbasierte Methoden der Unterrichtsdiagnostik . http://www.unterrichtsdiagnostik.de/media/files/Broschuere_Version_7.0.pdf, abgerufen am 30.03.2020. - 32. Heritage, M. (2007). Formative assessment: What do teachers need to know and do?
Phi Delta Kappan, 89 , 140-145. - 33. Ifenthaler, D. / Widanapathirana, C. (2014). Development and validation of a learning analytics framework: Two case studies using support vector machines.
Technology, Knowledge and Learning, 19 (1-2), 221-240. - 34. Ikemoto, G. S. / Marsh, J. A. (2007). Cutting through the data driven mantra: Different conceptions of data-driven decision making. In P. A. Moss (Ed.),
Evidence and decision making (pp. 105-131). Chicago: National Society for the Study of Education. - 35. Jäger, R. S. (2006). Diagnostische Aufgaben und Kompetenzen von Lehrkräften. In K.-H. Arnold / U. Sandfuchs / J. Wiechmann (Hrsg.),
Handbuch Unterricht (S. 631-638). Bad Heilbrunn: Klinkhardt. - 36. Jahn, R. W. / Götzl, M. / Ketschau, T. J. (2020). Lernen in variablen Clustern. Zur differenzierenden und empirisch fundierten Gruppierung von Lernenden.
Zeitschrift für Berufs- und Wirtschaftspädagogik, 116 (4), 549-577. - 37. Jimerson, J. B. / Wayman, J. C. (2015). Professional learning for using data: Examining teacher needs and supports.
Teachers College Record, 117 (4), 1-36. - 38. Kärner, T. (in Vorbereitung). Psychophysiological assessment of workplace stress via cortisol measures and cardiovascular markers. In M. Goller / E. Kyndt / S. Paloniemi / C. Damsa (Eds.),
Methods for researching professional learning and development: Challenges, applications and empirical illustrations. Dordrecht: Springer. - 39. Kärner, T. / Fenzl, H. / Warwas, J. / Schumann, S. (2019). Digitale Systeme zur Unterstützung von Lehrpersonen - Eine kategoriengeleitete Sichtung generischer und anwendungsspezifischer Systemfunktionen.
Zeitschrift für Berufs- und Wirtschaftspädagogik, 115 (1), 39-65. - 40. Kärner, T. / Höning, J. (2021). Teachers’ experienced classroom demands and autonomic stress reactions: Results of a pilot study and implications for process-oriented research in vocational education and training.
Empirical Research in Vocational Education and Training , 13: 8. https://doi.org/10.1186/s40461-021-00113-3. - 41. Kärner, T. / Kögler, K. (2016). Emotional states during learning situations and students’ self-regulation: process-oriented analysis of person-situation interactions in the vocational classroom.
Empirical Research in Vocational Education and Training , 8: 12. https://doi.org/10.1186/s40461-016-0038-8. - 42. Kärner, T. / Reinke, H. / Frim, A. / Heinrichs, K. (2019). Innere Differenzierung im Unterricht mit jugendlichen Asylsuchenden und Geflüchteten aus der Sicht von Lehrpersonen. In E. Wittmann / D. Frommberger / U. Weyland (Hrsg.),
Jahrbuch der berufs- und wirtschaftspädagogischen Forschung 2019 (S. 59-74). Berlin: Budrich. - 43. Kärner, T. / Röhrig, F. / Warwas, J. (2020). Situative Anforderungscharakteristika lernprozessbegleitender Diagnostik im Unterricht: Systematisches Literaturreview und Fragebogenentwicklung.
Zeitschrift für Berufs- und Wirtschaftspädagogik, 116 (4), 643-676. - 44. Kärner, T. / Sembill, D. (2021). Berufsbildungsforschung - Geldverschwendung oder Innovationsmotor? In K. Beck / F. Oser (Hrsg.),
Resultate und Probleme der Berufsbildungsforschung - Festschrift für Susanne Webe r (S. 245-264). Bielefeld: wbv. - 45. Kärner, T. / Sembill, D. / Assmann, C. / Friederichs, E. / Carstensen, C. H. (2017). Analysis of person-situation interactions in educational settings via cross-classified multilevel longitudinal modelling: illustrated with the example of students’ stress experience.
Frontline Learning Research, 5 (1), 16-42. http://dx.doi.org/10.14786/flr.v5i1.137. - 46. Kärner, T. / Warwas, J. / Krannich, M. / Weichsler, N. (2021). How does information consistency influence prospective teachers’ decisions about differentiated task assignments? A within-subject experiment to explain data-based decision-making in heterogeneous classes.
Learning and Instruction, 74 (3), 101440. - 47. Kärner, T. / Warwas, J. / Schumann, S. (2021). A Learning Analytics Approach to Address Heterogeneity in the Classroom: The Teachers’ Diagnostic Support System.
Technology, Knowledge and Learning, 26 (1), 31-52. - 48. Kingston, N. / Nash, B. (2011). Formative assessment: A meta-analysis and a call for research.
Educational Measurement: Issues and Practice, 30 (4), 28-37. - 49. Kippers, W. B. / Wolterinck, C. H. D. / Schildkamp, K. / Poortman, C. L. / Visscher, A. J. (2018). Teachers’ views on the use of assessment for learning and data-based decision making in classroom practice.
Teaching and Teacher Education, 75 , 199-213. - 50. Klafki, W. / Stöcker, H. (1976). Innere Differenzierung des Unterrichts.
Zeitschrift für Pädagogik, 22 , 497-523. - 51. Krannich, M. / Goetz, T. / Lipnevich, A. A. / Bieg, M. / Roos, A.-L. / Becker, E. S. / Morger, V. (2019). Being over- or underchallenged in class: Effects on students’ career aspirations via academic self-concept and boredom.
Learning and Individual Differences, 69 , 206-218. - 52. Leahy, S. / Lyon, C. / Thompson, M. / Wiliam, D. (2005). Classroom assessment: Minute-by-minute and day-by-day.
Educational Leadership, 63 (3), 19-24. - 53. Lee, H. / Feldman, A. / Beatty, I. D. (2012). Factors that Affect Science and Mathematics Teachers’ Initial Implementation of Technology-Enhanced Formative Assessment Using a Classroom Response System.
Journal of Science Education and Technology, 21 (5), 523-539. - 54. Liberati, A. / Altman, D. G. / Tetzlaff, J. / Mulrow, C. / Gøtzsche, P. C. / Ioannidis, J. P. A. / Clarke, M. / Devereaux, P. J. / Kleijnen, J. / Moher, D. (2009). The PRISMA Statement for Reporting Systematic Reviews and Meta-Analyses of Studies That Evaluate Health Care Interventions: Explanation and Elaboration.
PLoS Med, 6 (7), e1000100. - 55. Maier, U. (2010). Formative Assessment - Ein erfolgversprechendes Konzept zur Reform von Unterricht und Leistungsmessung?
Zeitschrift für Erziehungswissenschaft, 13 (2), 293-308. - 56. Mandinach, E. B. (2012). A perfect time for data use: Using data-driven decision making to inform practice.
Educational Psychologist, 47 , 71-85. - 57. Mayring, P. (2015).
Qualitative Inhaltsanalyse. Grundlagen und Techniken. Weinheim: Beltz. - 58. McKown, C. / Weinstein, R. S. (2008). Teacher expectations, classroom context, and the achievement gap.
Journal of School Psychology, 46 (3), 235-261. - 59. McMaster, K. L. / Lembke, E. S. / Shin, J. / Poch, A. L. / Smith, R. A. / Jung, P.-G. / Allen, A. A. / Wagner, K. (2019). Supporting teachers’ use of data-based instruction to improve students’ early writing skills.
Journal of Educational Psychology, 112 1 1-21. - 60. Paradies, L. / Linser, H. J. (2013).
Differenzieren im Unterricht . Berlin: Cornelsen. - 61. Pawlik, K. (1976). Modell- und Praxisdimensionen psychologischer Diagnostik. In K. Pawlik (Hrsg.),
Diagnose der Diagnostik: Beiträge zur Diskussion der psychologischen Diagnostik in der Verhaltensmodifikation (S. 13-43). Stuttgart: Klett. - 62. Power, D. J. (2002).
Decision support systems: concepts and resources for managers . Westport: Quorum Books. - 63. Rausch, A. / Kögler, K. / Seifried, J. (2019). Validation of Embedded Experience Sampling (EES) for Measuring Non-cognitive Facets of Problem-Solving Competence in Scenario-Based Assessments.
Frontiers in Psychology, 10 , 1-16. https://doi.org/10.3389/fpsyg.2019.01200. - 64. Scharenberg, K. / Rollett, W. / Bos, W. (2015). Stehen Merkmale der Klassenkomposition in einem Zusammenhang mit dem Beanspruchungsempfinden von Grundschullehrkräften?
Unterrichtswissenschaft, 43 (2), 101-119. - 65. Schifter, C. C. / Natarajan, U. / Ketelhut, D. J. / Kirchgessner, A. (2014). Data-Driven Decision Making: Facilitating Teacher Use of Student Data to Inform Classroom Instruction.
Contemporary Issues in Technology and Teacher Education, 14 (4), 419-432. - 66. Schildkamp, K. / Karbautzki, L. / Vanhoof, J. (2014). Exploring data use practices around Europe: Identifying enablers and barriers.
Studies in Educational Evaluation, 42 , 15-24. - 67. Schmidinger, E. / Hofmann, F. / Stern, T. (2015). Leistungsbeurteilung unter Berücksichtigung ihrer formativen Funktion. In M. Bruneforth / F. Eder / K. Krainer / C. Schreiner / A. Seel / C. Spiel (Hrsg.),
Nationaler Bildungsbericht Österreich 2015. 2. Fokussierte Analysen bildungspolitischer Schwerpunktthemen (S. 59-94). Graz: Leykam. - 68. Schumann, S. / Kärner, T. / Maué, E. (2018). Integration von jungen Geflüchteten in das deutsche Berufsbildungssystem: Klassenkompositionseffekte und binnendifferenzierende Maßnahmen. In M. Pilz / K. Breuing / S. Schumann (Hrsg.),
Berufsbildung zwischen Tradition und Moderne. Festschrift für Thomas Deißinger zum 60. Geburtstag (S. 83-101). Wiesbaden: Springer VS. - 69. Schütze, B. / Souvignier, E. / Hasselhorn, M. (2018). Stichwort - Formatives Assessment.
Zeitschrift für Erziehungswissenschaft, 21 (4), 697-715. - 70. Sembill, D. (1999). Selbstorganisation als Modellierungs-, Gestaltungs- und Erforschungsidee beruflichen Lernens. In T. Tramm / D. Sembill / F. Klauser / E.-G. John (Hrsg.),
Professionalisierung kaufmännischer Berufsbildung. Festschrift zum 60. Geburtstag von Frank Achtenhagen (S. 146-174). Frankfurt a. M.: Lang. - 71. Sembill, D. (2019). Lehrpersonenausbildung 5.12. - Desozialisierung und Physiozid infolge von Digitalisierung? Ein Essay. In D. Holtsch / M. Oepke / S. Schumann (Hrsg.),
Lehren und Lernen auf der Sekundarstufe II. Gymnasial- und wirtschaftspädagogische Perspektiven (S. 402-418). Bern: hep. - 72. Sembill, D. / Kärner, T. (2020). Emotionen sind Macht. Analoge und digitale Rhythmen in der Fortschrittsdebatte der beruflichen Lehrpersonenbildung. In K. Heinrichs / K. Kögler / Ch. Siegfried (Hrsg.), Berufliches Lehren und Lernen: Grundlagen, Schwerpunkte und Impulse wirtschaftspädagogischer Forschung. Digitale Festschrift für Eveline Wuttke zum 60. Geburtstag.
bwp@ Berufs- und Wirtschaftspädagogik - online , 1-49. https://www.bwpat.de/profil6_wuttke/sembill_kaerner_profil6.pdf, abgerufen am19.10.2020. - 73. Sembill, D. / Rausch, A. / Kögler, K. (2013). Non-Cognitive Facets of Competence. Theoretical Foundations and Implications for Measurement. In K. Beck / O. Zlatkin-Troitschanskaia (Eds.),
From Diagnostics to Learning Success (pp. 199-211). Rotterdam: Sense. - 74. Shavelson, R. J. / Young, D. B. / Ayala, C. C. / Brandon, P. R. / Furtak, E. M. / Ruiz-Primo, M. A. (2008). On the impact of curriculum-embedded formative assessment on learning: A collaboration between curriculum and assessment developers.
Applied Measurement in Education, 21 (4), 295-314. - 75. Shirley, M. L. / Irving, K. E. (2015). Connected Classroom Technology Facilitates Multiple Components of Formative Assessment Practice.
Journal of Science Education and Technology, 24 (1), 56-68. - 76. Spector, J. M. / Ifenthaler, D. / Sampson, D. / Yang, L. J. / Mukama, E. / Warusavitarana, A. et al. (2016). Technology enhanced formative assessment for 21st century learning.
Journal of Educational Technology & Society, 19 (3), 58-71. - 77. Südkamp, A. / Praetorius, A.-K. (2017).
Diagnostische Kompetenz von Lehrkräften: Theoretische und methodische Weiterentwicklung . Münster: Waxmann. - 78. Tatar, M. / Horenczyk, G. (2003). Diversity-related burnout among teachers.
Teaching and Teacher Education, 19 (4), 397-408. - 79. Van den Berg, M. / Bosker, R. J. / Suhre, C. J. M. (2018). Testing the effectiveness of classroom formative assessment in Dutch primary mathematics education.
School Effectiveness and School Improvement, 29 (3), 339-361. - 80. Van der Kleij, F. M. / Vermeulen, J. A. / Schildkamp, K. / Eggen, T. J. (2015). Integrating data-based decision making, assessment for learning and diagnostic testing in formative assessment.
Assessment in Education: Principles, Policy & Practice, 22 (3), 324-343. - 81. van Ophuysen, S. / Lintorf, K. (2013). Pädagogische Diagnostik im Schulalltag. In S.-I. Beutel / W. Bos / R. Porsch (Hrsg.),
Lernen in Vielfalt: Chance und Herausforderung für Schul- und Unterrichtsentwicklung (S. 55-76). Münster: Waxmann. - 82. Vanlommel, K. / Van Gasse, R. / Vanhoof, J. / Van Petegem, P. (2017). Teachers’ decision-making: Data based or intuition driven?
International Journal of Educational Research, 83 (1), 75-83. - 83. Vervaet, R. / Van Houtte, M. / Stevens, P. A. J. (2018). Multicultural Teaching in Flemish Secondary Schools: The Role of Ethnic School Composition, Track, and Teachers’ Ethnic Prejudice.
Education & Urban Society, 50 (3), 274-299. - 84. Walkington, C. A. (2013). Using Adaptive Learning Technologies to Personalize Instruction to Student Interests: The Impact of Relevant Contexts on Performance and Learning Outcomes.
Journal of Educational Psychology, 105 (4), 932-945. - 85. Warwas, J. / Kärner, T. / Golyszny, K. (2015). Diagnostische Sensibilität von Lehrpersonen im Berufsschulunterricht: Explorative Prozessanalysen mittels Continuous-State-Sampling.
Zeitschrift für Berufs- und Wirtschaftspädagogik, 111 (3), 437-454.