Python 기반의 쓰기 평가 연습 프로그램 개발 (Development a Python-based Writing Assessment Practice Program)

이 연구는 쓰기 평가자 훈련을 바탕으로 쓰기 평가 전문성을 신장시키기 위해 쓰기 평가 연습 프로그램을 개발하는 데 목적이 있다. 이를 위해 2016년 8월에 경남과 경기 지역의 고등학생들이 쓴 학생 글 자료 40편 및 이 글을 대상으로 한 국어교사 50명의 채점 자료를 소규모 데이터베이스로 구축하고, 컴퓨터 프로그래밍 언어인 Python을 활용하여 쓰기 평가 연습 프로그램을 개발하였다.
쓰기 평가 연습 프로그램은 3단계로 이루어져 있다. 1단계는 ‘채점 기준 확인 및 연습 코스 선택’으로, 채점 기준을 확인하고 점수 예측’, ‘비교 판정’, ‘점수 차이 추정’, ‘상중하 분류’의 연습 코스를 선택하는 단계이다. 2단계는 ‘채점 연습’으로, 선택한 연습 코스에서 실제 학생 글 자료를 활용하여 연습을 한 후 국어교사의 채점 결과왿� 비교하며 연습하는 단계이다. 3단계는 ‘피드백’으로, 각 연습 코스가 끝난 후 ‘채점 시간’과 ‘정답 여부’에 대한 피드백을 평가자에게 제공하는 단계이다. 채점자는 자신의 채점 결과왿�, 데이터베이스에 저장된 국어교사 50명의 채점 점수를 비교하여 자신의 채점 경향을 파악할 수 있으며 이를 통해 쓰기 평가 전문성을 향상시킬 수 있다.
이 연구는 쓰기 채점자의 평가 전문성을 향상시키기 위한 실제적인 프로그램을 개발하는데 초점을 두었다. 추후에 프로그램을 보완하여 활용한다면 쓰기 채점자의 실제적인 평가 전문성을 함양하는 데 기여할 수 있을 것이다.

The study developed a writing assessment exercise program and contributed to the development of writing assessment expertise through the rater training of the write. To this end, we built a writing assessment exercise program using Python and used actual student writing materials and teacher scoring as a database for writing assessment exercises. The writing assessment exercise program consists of three steps: “Checking the scoring criteria and selecting the practice course,” this practice course consists of 'point prediction', 'comparative judgment', 'point difference estimation', and 'upper classification'. Step 2 is 'Grading Practice', which gives you three opportunities per session and provides three practice opportunities depending on the course you choose. Step 3 is a 'feedback', and after each practice course, feedback on the scorer's 'scoring time' and 'correct answer' is provided. Also, after the practice course, you can choose another practice course to practice additional scoring. This study focused on developing practical programs to improve the assessment expertise of write scorers. It will contribute to improving the practical assessment expertise of the write scorer by supplementing the program later.