SWIM: Student Writing Simulation via Proficiency-Conditioned Generation
Автори: Heejin Do, Jakub Kontak, Mrinmaya Sachan
Видання / Джерело: arXiv (2026)
Навчання з підкріпленням із використанням винагород за автоматичне оцінювання есе дозволяє ШМ реалістичніше симулювати студентів із різними рівнями знань, ніж це робить звичайний промптинг.
Головне з роботи
- Промптинг на основі рубрик є недостатнім для контролю детальних лінгвістичних і структурних аспектів письма.
- Кероване донавчання (SFT) значно покращує відповідність рівню знань порівняно з промптингом завдяки навчанню на автентичних парах есе-оцінка.
- Винагорода за відповідність рівню знань (PAR) дозволяє навчанню з підкріпленням додатково вдосконалювати та збалансовувати письмові характеристики одночасно.
- Моделі краще відтворюють письмо високого рівня, ніж низького, часто маючи труднощі з імітацією автентичних граматичних і структурних помилок у цілях з низьким рівнем знань.
- Ефекти навчання з підкріпленням поширюються на різні, незалежно навчені моделі автоматичного оцінювання есе, що свідчить про надійність моделювання поведінки, зумовленої рівнем знань.
Суть дослідження (TL;DR)
Анотація авторів (оригінал)
Writing proficiency manifests in how students develop content, organize ideas, choose words, and use language. Despite growing interest in LLM-based student simulation, whether LLMs can reproduce such multidimensional variation in extended writing remains largely unexplored. In this work, we explore if language models can realistically simulate student writing, and introduce SWIM, a task that formulates Student Writing sIMulation as proficiency-conditioned essay generation. We evaluate prompting, supervised fine-tuning (SFT), and reinforcement learning (RL) methods for writing simulation using automated essay scoring as a measure of profile alignment. Extensive experiments reveal that prompting provides limited proficiency control, even for strong proprietary LLMs with rubric-grounded strategies. In particular, while models can adjust content-oriented traits, they struggle to reproduce the lexical, grammatical, and organizational variation in different proficiency levels. SFT substantially improves alignment, while RL with the proposed proficiency-alignment reward yields further gains across all writing traits and essay prompts. Our findings suggest that explicit supervision enables substantially stronger profile alignment than prompting alone, while authentic low-proficiency writing remains challenging to reproduce.
Переклад анотації не надається.
Оцінка за критеріями якості та релевантності
Тематична релевантність для освітян
- Надає масштабований метод для симуляції різноманітних рівнів успішності студентів у контексті оцінювання.
- Визначає специфічні лінгвістичні особливості, де ШМ не вдається відтворити типову продуктивність студентів, що інформує розробку більш стійких систем оцінювання.
- Демонструє ефективність методів вирівнювання на основі винагород для контролю виводу ШМ в освітніх застосунках.
Методологія та вибірка
Дослідження використовує набір даних ASAP/ASAP++ (N=~14 000 есе за 8 промптами). Методи включають промптинг на основі рубрик (CTP та SRLP), кероване донавчання (SFT) та навчання з підкріпленням за допомогою GRPO з використанням винагороди за відповідність рівню (PAR). Протестовано моделі: Claude Sonnet, GPT-5, Qwen2.5-7B та Qwen3-4B.
Чому варто прочитати
Ця стаття пропонує сувору, сучасну методологію для генерації синтетичних даних учнів, що є критично важливим для навчання освітніх ШІ-систем. Вона дає важливе розуміння обмежень поточних великих мовних моделей у імітації конкретних рівнів успішності студентів, що є життєво необхідним для фахівців, які проектують ШІ-інструменти для освіти.
Головні твердження та перевірені цитати
Орієнтовний переклад: “Безпосередній нагляд на основі автентичних пар «оцінка–есе» виявляється значно ефективнішим, ніж лише опис рубрик, що дозволяє моделям з відкритим кодом 7B та 4B перейти від майже випадкового узгодження за допомогою підказок (prompting) до змістовного контролю рівня володіння.”* (машинний переклад) — 10.48550/arxiv.2609.03215, с. 2, абз. 2 (exact)
Орієнтовний переклад: “GRPO із запропонованим PAR додатково покращує узгодженість за кожною ознакою письма та кожним завданням есе, забезпечуючи більш збалансовану генерацію на рівні профілю.”* (машинний переклад) — 10.48550/arxiv.2609.03215, с. 2, абз. 2 (exact)
Орієнтовний переклад: “моделі відтворюють письмо високого рівня володіння точніше, ніж письмо низького рівня володіння”* (машинний переклад) — 10.48550/arxiv.2609.03215, с. 2, абз. 2 (exact)
Обмеження та особливості дослідження
- Оцінювання спирається на проксі-моделі автоматичного оцінювання есе (AES), які можуть не охоплювати всі виміри автентичного студентського письма.
- Експерименти обмежені набором даних ASAP/ASAP++, що може обмежити можливість узагальнення на інші освітні контексти чи мови.
- Студентське письмо моделюється як статичні профілі знань, ігноруючи динамічні зміни або еволюцію стану студента.
- підтримує Моделі, налаштовані на інструкції, оптимізовані для створення плавного та структурованого тексту, що виступає бар'єром для симуляції письма нижчого рівня знань. «This inductive bias, consistent with the tendency of aligned LLMs to produce polished, helpful, and well-formed outputs (Ouyang et al., 2022; Bai et al., 2022), is beneficial for most generation tasks», с. 7, абз. 15
- [метод / поведінковий реалізм проти відповідності оцінкам]: Хоча PAR значно покращує відповідність характеристик, виміряну через AES, стаття зазначає, що це не вирішує якісну проблему невдачі моделей у генерації автентичних структурних помилок низького рівня знань.