변분 근사를 이용한 동적 비보상 다차원 문항반응이론 모델
Dynamical Non-compensatory Multidimensional IRT Model Using Variational Approximation
한국어 초록
다차원 문항반응이론(MIRT)은 시험 응답으로부터 학습자의 다차원 잠재 능력을 정밀하게 추정하는 통계적 검사 이론이다. MIRT에는 보상형 모델과 비보상형 모델이 모두 제안되어 왔는데, 전자는 각 능력이 다른 능력을 보완할 수 있다고 가정하는 반면, 후자는 보완할 수 없다고 가정한다. 이러한 비보상적 가정은 여러 능력을 측정하는 많은 시험에서 설득력을 가지므로, 해당 데이터에 비보상형 모델을 적용하는 것은 편향 없는 정확한 추정을 달성하는 데 매우 중요하다. 시험과 달리, 일상적인 학습에서는 잠재 능력이 시간에 따라 변화한다. 능력의 성장을 모니터링하기 위해 MIRT 모델의 동적 확장이 연구되어 왔다. 그러나 대부분은 보상형 모델을 가정하였으며, 비보상적 가정 하에서 능력의 연속적인 잠재 상태를 재현할 수 있는 모델은 지금까지 제안되지 않았다. 비보상적 가정 하에서 정확한 능력 추적(skill tracing)을 가능하게 하기 위해, 본 논문에서는 선형 동적 시스템과 비보상형 모델을 결합하여 비보상 다차원 MIRT 모델의 동적 확장을 제안한다. 이로 인해 복잡한 능력 사후확률(posterior)이 발생하며, 근사된 사후확률과 실제 사후확률 간의 쿨백-라이블러 발산(Kullback-Leibler divergence)을 최소화함으로써 이를 가우시안 분포로 근사한다. 모델 파라미터의 학습(training) 알고리즘은 몬테카를로 기댓값 최대화(Monte Carlo expectation maximization)를 통해 유도된다. 시뮬레이션 연구를 통해 제안된 방법이 잠재 능력을 정확하게 재현할 수 있음을 검증한 반면, 동적 보상형 모델은 심각한 과소추정 오류를 겪음을 확인하였다. 나아가 실제 데이터셋(dataset)에 대한 실험을 통해, 제안하는 동적 비보상형 모델이 실용적인 능력 추적을 추론(inference)하고 비보상형 및 보상형 모델 간의 능력 추적 차이를 명확히 밝힐 수 있음을 입증한다.
원문 초록
Multidimensional item response theory (MIRT) is a statistical test theory that precisely estimates multiple latent skills of learners from the responses in a test. Both compensatory and non-compensatory models have been proposed for MIRT: the former assumes that each skill can complement other skills, whereas the latter assumes they cannot. This non-compensatory assumption is convincing in many tests that measure multiple skills; therefore, applying non-compensatory models to such data is crucial for achieving unbiased and accurate estimation. In contrast to tests, latent skills will change over time in daily learning. To monitor the growth of skills, dynamical extensions of MIRT models have been investigated. However, most of them assumed compensatory models, and a model that can reproduce continuous latent states of skills under the non-compensatory assumption has not been proposed thus far. To enable accurate skill tracing under the non-compensatory assumption, we propose a dynamical extension of non-compensatory MIRT models by combining a linear dynamical system and a non-compensatory model. This results in a complicated posterior of skills, which we approximate with a Gaussian distribution by minimizing the Kullback-Leibler divergence between the approximated posterior and the true posterior. The learning algorithm for the model parameters is derived through Monte Carlo expectation maximization. Simulation studies verify that the proposed method is able to reproduce latent skills accurately, whereas the dynamical compensatory model suffers from significant underestimation errors. Furthermore, experiments on an actual data set demonstrate that our dynamical non-compensatory model can infer practical skill tracing and clarify differences in skill tracing between non-compensatory and compensatory models.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2609.10028v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.