지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
이용수
초록· 키워드
오류제보하기
본 연구의 목적은 단문 형식의 쓰기 답안 평가를 위해 개발한 자동채점 프로그램의 성능을 검증하여 대규모 쓰기 평가에서의 적용 가능성을 탐색하기 위한 것이다. 본 연구에서 성능 검증에 사용한 문항은 ‘상황에 맞는 짧은 글쓰기’(15～25단어, 5분) 문항과 ‘그림의 세부묘사 완성하기’(하위문장별 10단어 이내, 5분) 문항이다. 본 연구에서는 단문 형식의 쓰기 평가를 위한 자동채점 프로그램의 성능을 검증하기 위해 인간채점과 자동채점에 따른 상관계수, 유사일치도 통계에 근거한 채점자 간 신뢰도의 차이, 다국면 라쉬 모형에 근거한 채점자 엄격성의 차이, 일반화가능도 계수에 근거한 검사점수 신뢰도의 차이, 시간 및 비용 차이 등에 대한 통계적 분석을 실시하였다. 분석 결과, 자동채점이 인간채점자 1명을 대체할 경우 채점자 간 신뢰도, 검사점수 신뢰도를 인간채점과 유사한 수준으로 유지하면서 채점자 엄격성에 의한 영향력과 시간 및 비용을 큰 폭으로 감소시킬 수 있음을 확인하였다.
목차
등록된 정보가 없습니다.
참고문헌 (15)
참고문헌 신청
Brennan, R. L. / 2001 / Generalizability theory. / Springer
Leacock, C. / 2003 / c-rater: Automated scoring of short-answer questions / Computers and humanities 37 (4) : 389 ~ 405
Siddiqi, R. / 2008 / On the automated assessment of short free-text responses / Paper presented at the 34th International Association for Educational Assessment (IAEA) Annual Conf
Sukkarieh, J. Z. / 2003 / Auto-marking : Using computational linguistics to score short, free text responses / Paper presented at the 29th annual conference of the International A
Sukkarieh, J. Z. / 2005 / Automatic short answer marking / Proceedings of the 2nd Workshop on Building Educational Applications Using NLP
Leacock, C. / 2003 / c-rater: Automated scoring of short-answer questions / Computers and humanities 37 (4) : 389 ~ 405
Siddiqi, R. / 2008 / On the automated assessment of short free-text responses / Paper presented at the 34th International Association for Educational Assessment (IAEA) Annual Conf
Sukkarieh, J. Z. / 2003 / Auto-marking : Using computational linguistics to score short, free text responses / Paper presented at the 29th annual conference of the International A
Sukkarieh, J. Z. / 2005 / Automatic short answer marking / Proceedings of the 2nd Workshop on Building Educational Applications Using NLP
이 논문의 저자 정보
최근 본 자료
댓글(0)
0