psychometric_modeling

From Scoring to Explanations: Evaluating SHAP and LLM Rationales for Rubric-based Teaching Quality Assessment

Автори: Ivo Bueno, Babette Bühler, Philipp Stark, Tim Fütterer, Ulrich Trautwein, Dorottya Demszky, Heather Hill, Enkelejda Kasneci
Видання / Джерело: arXiv (2026)

Статистичні атрибуції SHAP забезпечують більш вірні пояснення оцінок на рівні речень, ніж раціоналізації великих мовних моделей у завданнях оцінювання класів.

Головне з роботи

Допрацьовані попередньо навчені мовні моделі досягають вищої точності оцінювання за рубрикатором, ніж великі мовні моделі з промптами, хоча допрацьовані моделі страждають від стиснення оцінок поблизу середнього значення шкали.
Атрибуція ознак за допомогою SHAP на рівні речень послідовно визначає впливовий текст, який змінює передбачення моделі при видаленні, демонструючи вищу вірність пояснень, ніж вибори доказів, згенеровані великими мовними моделями.
Пояснення речень, згенеровані за допомогою SHAP, ефективно переносяться на різні архітектури моделей, тоді як раціоналізації великих мовних моделей мають слабкий і немонотонний вплив при перенесенні на інші моделі оцінювання.
Великі мовні моделі з промптами демонструють мінливість у дотриманні обмежень виведення та низьке перекриття на рівні речень з атрибуціями ознак SHAP при виборі доказів із транскриптів.

Суть дослідження (TL;DR)

Простими словами Словами дослідження

Це дослідження перевіряє, чи можуть моделі штучного інтелекту пояснити, чому вони ставлять конкретні оцінки якості транскриптам шкільних уроків. Хоча менші допрацьовані моделі штучного інтелекту давали більш точні прогнози оцінок, статистичні пояснення SHAP виявилися набагато надійнішими, ніж пояснення, написані великими мовними моделями. Отримані результати свідчать про те, що пояснення, згенеровані безпосередньо великими мовними моделями, не слід сприймати як справжнє виправдання автоматизованих освітніх оцінок.

Моделі автоматизованого оцінювання за рубрикатором для складного освітнього дискурсу часто не мають надійних пояснень на рівні речень для призначених балів. Автори пропонують фреймворк інтерпретованості, що поєднує атрибуції SHAP на рівні речень та раціоналізацію за допомогою мовних моделей, на основі 6005 сегментів транскриптів уроків, оцінених за виміром якості зворотного зв'язку CLASS, які оцінювалися за допомогою тестів на вірність на основі видалення та крос-модельного перенесення. Допрацьовані попередньо навчені мовні моделі досягли вищої точності оцінювання (найкраща MAE 0,96) порівняно з моделями із промптами, тоді як тести на видалення показали, що атрибуції SHAP створюють значно більші та більш послідовні зсуви передбачень, ніж раціоналізації великих мовних моделей.

Анотація авторів (оригінал)

Automated scoring models are increasingly used to assign rubric-based quality ratings to complex language performances, including classroom transcripts, yet they typically provide little insight into why a particular score is produced. We propose a general framework for sentence-level interpretability of rubric-based scoring that combines model-agnostic Shapley-value attributions with rationales generated by large language models (LLMs). Instantiated on the Quality of Feedback dimension of the CLASS framework using the NCTE corpus, the framework enables systematic comparison of fine-tuned pretrained language models (PLMs) and prompted LLMs on both scoring performance and explanation faithfulness. Across 6k annotated transcript segments, fine-tuned PLMs outperform LLMs in prediction accuracy but exhibit label compression toward mid-scale scores. Deletion-based tests show that SHAP identifies sentences that reliably drive model predictions, producing typically larger and more coherent prediction shifts than LLM-generated rationales. Cross-model analyses further reveal that SHAP attributions transfer robustly across architectures, whereas LLM rationales exert limited and inconsistent influence. Overall, the findings demonstrate that SHAP provides more faithful and transferable explanations for rubric-based scoring, and that the proposed framework offers a principled basis for evaluating both scoring models and their explanations in high-stakes educational settings and other rubric-based language assessment tasks.

Переклад анотації не надається.

Оцінка за критеріями якості та релевантності

Новизна

7.0/10

Методологічна строгість

8.0/10

Інженерні контрзаходи

7.0/10

Виклик консенсусу

7.0/10

Тематична відповідність

7.0/10

Тематична релевантність для освітян

Оцінює валідність використання великих та попередньо навчених мовних моделей як оцінювачів за складними багаторівневими освітніми рубрикаторами.
Надає кількісний метод (тестування збурення на основі видалення) для перевірки вірності пояснень в автоматизованих системах оцінювання.
Висвітлює системні проблеми стиснення міток у керованих моделях освітнього оцінювання під час навчання на перекошених даних рубрикатора.

Методологія та вибірка

У дослідженні проаналізовано 6005 15-хвилинних сегментів транскриптів класів з 1600 уроків математики в початковій школі з корпусу NCTE (4775 для тренування, 1230 для тестування), анотованих за виміром якості зворотного зв'язку CLASS за шкалою від 1 до 7. Допрацьовані моделі енкодерів (BERT, ALBERT, RoBERTa, DeBERTaV3 base/large) порівнювалися з 4-бітними квантованими відкритими мовними моделями з інструктивним налаштуванням (Llama 3.1 8B/70B, Mixtral 8x7B/8x22B, Qwen 3 4B/30B/235B, Mistral Small/24B). Базові лінії включали базові моделі константного середнього/медіанного значення та випадкове видалення речень однакової довжини.

Чому варто прочитати

Ця стаття пропонує ретельний метод перевірки того, чи є пояснення штучного інтелекту для оцінювання за рубрикатором справді вірними, чи лише правдоподібно звучать галюцинації. Демонструючи, що атрибуції ознак SHAP перевершують раціоналізації мовних моделей у тестах причинного видалення та крос-архітектурному перенесенні, робота пропонує чіткі вказівки для створення валідних, прозорих інструментів автоматизованого оцінювання та зворотного зв'язку для вчителів.

Головні твердження та перевірені цитати

Допрацьовані попередньо навчені мовні моделі перевершують мовні моделі з промптами за точністю оцінювання сегментів транскриптів, але демонструють стиснення міток у бік середніх оцінок.

Оригінал: “Across 6k annotated transcript segments, fine-tuned PLMs outperform LLMs in prediction accuracy but exhibit label compression toward midscale scores.”
Орієнтовний переклад: “На масиві з 6 тисяч анотованих сегментів транскриптів донавчені PLM перевершують LLM за точністю прогнозування, але демонструють стиснення міток у бік середніх балів.”^{* (машинний переклад)} — 10.48550/arxiv.2606.05180, с. 1, абз. 7 (exact)

Атрибуції SHAP на рівні речень забезпечують більш вірні пояснення прогнозів моделі, ніж раціоналізації, згенеровані мовними моделями, у тестах на основі видалення.

Оригінал: “Deletion-based tests show that SHAP identifies sentences that reliably drive model predictions, typically producing larger and more coherent prediction shifts than LLM-generated rationales.”
Орієнтовний переклад: “Тести на основі видалення показують, що SHAP ідентифікує речення, які надійно зумовлюють прогнози моделі, зазвичай створюючи більші й більш когерентні зсуви прогнозів, ніж згенеровані LLM обґрунтування.”^{* (машинний переклад)} — 10.48550/arxiv.2606.05180, с. 1, абз. 7 (exact)

Атрибуції важливості речень, отримані за допомогою SHAP, надійно переносяться між різними архітектурами моделей, тоді як раціоналізації мовних моделей чинять непослідовний міжмодельний вплив.

Оригінал: “Cross-model analyses further reveal that SHAP attributions transfer robustly across architectures, whereas LLM rationales exert limited and inconsistent influence.”
Орієнтовний переклад: “Міжмодельні аналізи також виявляють, що атрибьюції SHAP стійко перенояться між архітектурами, тоді як обґрунтування LLM справляють обмежений і непослідовний вплив.”^{* (машинний переклад)} — 10.48550/arxiv.2606.05180, с. 1, абз. 7 (exact)

Обмеження та особливості дослідження

Мала вибірка: немає
Єдиний детектор: не згадано в тексті
Немає змагального тестування: не згадано в тексті
Лише одна мова: не згадано в тексті

Набір даних містить серйозний дисбаланс міток: 81% оцінок припадає на середній діапазон (3–5), що змушує допрацьовані моделі згортатися до середнього значення та пропускати екстремальні категорії рубрикатора.
Оцінки обмежені єдиним текстовим виміром CLASS (Якість зворотного зв'язку) на основі експертних анотацій одного оцінювача без метрик надійності між оцінювачами чи мультимодальних сигналів.
Видалення речень порушує потік природного дискурсу в класі та прагматичну структуру, що може непропорційно вплинути на обробку контексту мовними моделями.
Не проводилося жодних оцінок експертів-людей для перевірки того, чи відповідають речення, вибрані SHAP або великими мовними моделями, педагогічним рубрикаторам, що відповідають конструкту.

З тексту статті (цитата перевірена)

підтримує Атрибуція ознак SHAP забезпечує локальну та глобальну інтерпретованість у моделях автоматизованого оцінювання за рубрикатором. «Boulanger and Kumar (2020) apply SHAP to automated essay scoring to quantify the contribution of linguistic features to rubric-level predictions, enabling both local and global interpretability of model behavior.», с. 3, абз. 3

Висновок моделі (прогалини та суперечності)

[explanation_faithfulness / методологічна прогалина]: Хоча згенеровані мовними моделями довільні текстові раціоналізації здаються переконливими для читачів-людей, збурення на основі видалення показують, що їм бракує причинної вірності порівняно з атрибуціями SHAP на основі вкладень речень.
[scoring_accuracy_vs_dispersion / концептуальна прогалина]: Допрацьовані мовні моделі оптимізують метрики похибки (MAE/MSE) ціною серйозного стиснення оцінок (нездатність прогнозувати екстремальні значення рубрикатора), тоді як мовні моделі з промптами зберігають дисперсію оцінок ціною вищої похибки.

#Автоматизоване оцінювання #Оцінювання за рубрикатором #Раціоналізації мовних моделей #SHAP #Вірність пояснень #Система оцінювання якості уроку #Оцінювання якості викладання