Word Problem Solving in Large Language Models

Abstract

Mathematische Textaufgaben werden in der Forschung zu LLMs häufig als Leistungsindikator verwendet. In diesem Scoping Review fassen wir Forschung zum Lösen von Textaufgaben durch LLMs zusammen und situieren sie aus einer mathematikdidaktischen Perspektive. Die Ergebnisse zeigen auf, dass Textaufgaben zur Evaluation von LLMs häufig eine prototypische Struktur aufweisen, innermathematische Problemstellungen behandeln und damit nur einen Teilaspekt der mathematikdidaktischen Perspektive abdecken. In solchen Aufgaben erreichen LLMs inzwischen bessere Leistungen als Schülerinnen und Schüler.