主催: 一般社団法人 人工知能学会
会議名: 2021年度人工知能学会全国大会(第35回)
回次: 35
開催地: オンライン
開催日: 2021/06/08 - 2021/06/11
小論文自動採点は,人間評価者に代わって自動採点モデルが小論文の採点を行う自然言語処理におけるタスクの一つである.近年では多くの自動採点モデルが提案されており,それぞれに異なった特徴を有している.本研究では,評価者特性を考慮した項目反応理論を用いて自動採点モデルの統合を行う新たな手法を提案する.具体的には自動採点モデルを一人の評価者とみなして評価者特性を考慮した項目反応モデルを適用することで,それぞれの自動採点モデルの特徴を考慮した統合を行う.実験を通して,提案手法が統合した自動採点モデルの特徴を捉えることで,単体の自動採点モデルや,単純な予測スコアの平均化手法と比べて予測精度を向上させることを示す.