과정중심평가를 위한 인공지능 서비스의 사용자 경험 분석과 개선 과제 탐색

• 영문명: User experience analysis and improvement tasks exploration of AI Services for Process-Based Assessment
• 발행기관: 한국교육방법학회
• 저자명: 이용민 이정연 김명랑 안수현
• 간행물 정보: 『교육방법연구』제36권 제4호, 481~508쪽, 전체 28쪽
• 주제분류: 사회과학 > 교육학
• 파일형태: PDF
• 발행일자: 2024.11.30

국문 초록

본 연구는 맞춤형 교육을 위한 과정중심평가 인공지능 솔루션인 클리포(CLIPO) 서비스를 활용한 과정중심평가에서 IPA, 키워드, 의미연결망 분석을 활용하여 교사들의 경험을 분석하고, 인공지능(AI) 기반 평가 시스템의 장점과 한계, 그리고 개선 요구를 탐구하는 데 목적이 있다. 이를 위해 클리포 시범 서비스에 참여하고 있는 경기도 교사를 대상으로 클리포 서비스에 대한 실태 및 사용경험에 대한 중요도와 만족도를 묻는 설문조사를 실시하였고, 106명의 응답자료를 분석하였다. 결과에 의하면 클리포 서비스는 과제 관리와 채점에서 교사들의 시간 절약과 업무 효율성을 향상시켰으며, 교사들은 자동화된 평가 과정에서 평가의 공정성과 일관성을 경험한 것으로 나타났다. 그러나 수행평가 설계 단계에서는 시간이 더 소요된다는 응답이 많았으며, 이는 AI 도구가 반복적인 작업에서는 유용하지만, 창의적이고 복잡한 과정에서는 교사의 전문성과 개입이 필요함을 시사한다. 또한, 사용자 인터페이스의 직관성과 보안성에 대한 개선 요구도 제기되었으며, AI 기반 자동 채점 및 맞춤형 피드백 기능의 확대 필요성도 확인되었다. 이러한 결과를 바탕으로 본 연구는 AI 기반 평가 도구의 성공적 도입을 위해 교사 연수 프로그램의 강화, 기술적 완성도 향상, 그리고 공정성과 투명성 보장을 위한 정책적 제언을 제시하였다.

영문 초록

This study aims to analyze teachers' experiences with process-based assessment using the Clifo service, an AI solution for process-based assessment (learning diagnostics) tailored for personalized education. It explores the advantages, limitations, and improvement needs of AI-based assessment systems. The results indicate that the Clifo service improved teachers' time efficiency and work productivity in task management and grading, and teachers experienced fairness and consistency in the automated assessment process. However, many respondents noted that more time was required during the performance assessment design phase, suggesting that while AI tools are useful for repetitive tasks, teachers' expertise and involvement are still necessary in creative and complex processes. Additionally, there were calls for improvements in the user interface's intuitiveness and security, and the need for expanding AI-based automated grading and personalized feedback functions was identified. Based on these findings, the study proposes policy recommendations, including strengthening teacher training programs, improving technical completeness, and ensuring fairness and transparency for the successful adoption of AI-based assessment tools.

목차

Ⅰ. 서론

Ⅱ. 이론적 배경

Ⅲ. 연구 방법

Ⅳ. 연구 결과

Ⅴ. 논의 및 결론

참고문헌

키워드

인공지능 과정중심평가 수행평가 자동 채점 artificial intelligence process-based assessment performance assessment automated grading