Modeling Nonlinear Ability Trajectories and Learner Heterogeneity in Online Learning: A Bayesian Nonparametric Dynamic IRT Framework
Автори: Zhihua Ma, Alice Xu, Icy Zhang, Guanyu Hu
Видання / Джерело: arXiv (2026)
Всупереч очікуванням, кількісні показники залученості не змогли спрогнозувати динаміку навчання під час суворого поздовжнього аналізу студентів статистики.
Головне з роботи
- Запропонована байєсівська непараметрична модель динамічної теорії відповіді на завдання дозволяє ідентифікувати профілі студентів без попереднього визначення їхньої кількості.
- Лонгітюдний аналіз свідчить про те, що рівень здібностей студентів на онлайн-курсах зі статистики залишається надзвичайно стабільним протягом усього навчання.
- Кількісні показники залученості, такі як тривалість сесій або їхня кількість, можуть бути недостатніми для прогнозування змін у результативності учнів.
- Обмеження дослідження, зокрема мала вибірка та специфіка платформи, вимагають обережності при застосуванні цих висновків до інших умов цифрового навчання.
Суть дослідження (TL;DR)
Анотація авторів (оригінал)
Online learning has amplified the need to understand how student engagement patterns influence learning outcomes, particularly given the flexibility of technology-mediated environments. To address this, we propose a Bayesian nonparametric dynamic item response theory (IRT) framework that tracks within-individual ability trajectories across instructional units. The proposed model integrates B-spline basis expansions to capture nonlinear effects of engagement behaviors on ability drift, alongside a Mixture-of-Finite-Mixtures (MFM) prior to automatically determine the number of latent learner clusters. This framework overcomes three limitations in the existing literature: (1) rigid linearity assumptions in engagement-ability relationships, (2) dependence on pre-specified cluster counts, and (3) the inability to track longitudinal ability dynamics. We apply the model to longitudinal data from 198 undergraduates completing a 9-chapter introductory statistics course on CourseKata. The model automatically identified four distinct learner profiles: struggling-declining (11\%), low-stable (23\%), mainstream-stable (55\%), and high-improving (12\%). Results indicate that ability trajectories remained remarkably stable across chapters, and engagement quantity metrics did not significantly predict ability drift. These findings suggest that in introductory online statistics education, academic ability primarily reflects a stable pre-existing characteristic rather than a dynamically malleable course outcome. Ultimately, this framework offers a flexible tool for learner profiling to inform adaptive instructional design.
Переклад анотації не надається.
Оцінка за критеріями якості та релевантності
Тематична релевантність для освітян
- Надає надійну баєсівську структуру для моделювання поздовжніх здібностей.
- Демонструє використання MFM-апріорних розподілів для уникнення довільних обмежень кластеризації.
- Ілюструє використання B-сплайнів для виявлення нелінійних ефектів в аналітиці навчання.
- Підкреслює критичні відмінності між кількістю та якістю залученості в оцінюванні результатів навчання.
Методологія та вибірка
Вибірка складається зі 198 студентів бакалаврату (із 213 зарахованих) курсу вступної статистики, які використовували платформу CourseKata взимку 2023 року. Методологія використовує баєсівську непараметричну динамічну модель IRT, що включає B-сплайн розширення для оцінки ефектів залученості та апріорний розподіл суміші скінченних сумішей (MFM). Модель валідована за допомогою симуляційного дослідження Монте-Карло зі 100 незалежними реплікаціями, що відтворюють емпіричні умови (N=198, T=9, J=230).
Чому варто прочитати
Ця стаття пропонує складну та сувору баєсівську психометричну структуру для аналізу поздовжніх даних про успішність студентів. Вона надає викладачам і дослідникам валідовану методологію для розмежування реальних здобутків у навчанні та стабільних характеристик у середовищах з технологічним опосередкуванням, що має пряме значення для розуміння впливу цифрових педагогічних інтервенцій.
Головні твердження та перевірені цитати
Орієнтовний переклад: “Ці результати свідчать про те, що у вступному онлайн-навчанні зі статистики академічна успішність насамперед відображає стабільну попередню характеристику, а не динамічно змінний результат курсу.”* (машинний переклад) — 10.48550/arxiv.2606.15525, с. 1, абз. 5 (exact)
Обмеження та особливості дослідження
- Лише одна мова: не згадано в тексті
- Аналіз зосереджувався виключно на кількісних метриках залученості (час, кількість сесій), а не на показниках якості, таких як ефективність навчання чи глибина когнітивної обробки.
- Дизайн дослідження може містити обмеження діапазону залученості через вимоги курсу, що зобов'язують виконувати всі завдання, що потенційно пригнічує зв'язки між залученістю та досягненнями.
- Відносно малий розмір вибірки (N=198) може обмежувати виявлення ледь помітних ефектів впливу залученості на результати.
- Результати можуть бути специфічними для дизайну платформи CourseKata та педагогіки викладання статистики для бакалаврів.
- [метод / методологічне обмеження]: Автори визнають, що стандартні параметричні структури росту часто недостатні для моделювання нелінійного, флуктуючого та індивідуалізованого навчання, на розв'язання чого і спрямована їхня методологія B-сплайн розширення.