QTI (문항 및 시험 상호운용성)

개요

평가 문항은 만드는 도구, 보관하는 문항 은행, 실제로 시행하는 시스템이 서로 다른 경우가 많다. 이 사이에 공통 형식이 없으면 문항을 옮길 때마다 변환 작업이 필요하고, 변환 과정에서 배점 규칙이나 접근성 설정이 유실된다. 문항 자산이 특정 제품에 묶이면 시스템 교체 비용도 커진다. QTI는 문항과 시험, 그리고 그 결과를 표현하는 공통 형식을 정의해 평가 자산을 도구와 독립적으로 관리할 수 있게 한다.

기술 관점에서 QTI 3.0은 이전의 QTI 계열과 접근성 확장 규격을 하나의 스펙으로 통합했다. 문항 표현을 HTML5에 맞춘 마크업으로 정리하고, 화면 표시에 쓰이는 공통 어휘를 정의해 저작 도구에서 시행 시스템까지 별도 변환 없이 넘길 수 있는 것을 목표로 한다. 접근성 지원, 적응형 시험, 확장 문항 유형이 별도 부가 규격이 아니라 스펙 안에서 함께 다뤄지는 것이 이전 버전과의 차이다. 문항에 담기는 정보의 범위가 넓어진 만큼, 시스템 사이를 옮겨도 유실되는 부분이 줄어든다.

핵심 개념

• qti-assessment-item: 문항 하나를 나타내는 단위. 지문과 응답 영역, 정답 정의, 채점 규칙을 함께 담는다.
• qti-assessment-test: 여러 문항을 묶은 시험 단위. 문항 제시 순서와 구간 구성, 시험 수준의 채점 규칙을 정의한다.
• 상호작용(interaction): 응답을 받는 방식. 선택형, 단답 입력형, 연결형, 순서 배열형 등 유형이 정의되어 있다.
• 응답 선언(response declaration): 응답으로 받을 값의 형태와 정답 기준을 선언하는 부분.
• 결과 선언(outcome declaration): 점수처럼 채점 결과로 산출되는 값을 선언하는 부분.
• 응답 처리(response processing): 받은 응답을 결과 값으로 바꾸는 채점 규칙. 자동 채점의 근거가 된다.
• 개인 요구 및 선호(PNP): 학습자별 접근성 요구와 표시 선호를 기술하는 정보. 확대 표시나 대체 텍스트 제공 같은 조정이 이 정보를 근거로 적용된다.
• 이식형 사용자 정의 상호작용(PCI): 표준 유형으로 표현하기 어려운 문항을 규격에 맞게 확장하는 방식. 시행 시스템이 달라도 같은 동작을 유지하도록 한다.
• 시험 구간: 시험 안에서 문항을 묶는 단위. 구간별로 문항 제시 순서, 무작위 추출 여부, 시간 제한, 되돌아가기 허용 여부 같은 시행 규칙을 따로 지정할 수 있다.
• 공통 표시 어휘: 문항의 표시 방식을 기술할 때 쓰는 표준 어휘. 시행 시스템마다 다르게 해석되던 부분을 줄여, 저작 단계에서 의도한 화면 구성이 시행 단계에서도 유지되도록 한다.

구성 요소

• 문항, 구간, 시험 정보 모델: 문항, 구간, 시험의 구조와 각 요소가 가질 수 있는 속성을 정의한다. QTI 3.0의 핵심 영역으로, 이 부분이 최종 릴리스로 공표된 시점은 2022년 5월이다.
• XML 바인딩: 정보 모델을 실제 파일로 표현하는 규칙. 문항과 시험은 이 규칙에 따른 XML로 저장 및 교환된다.
• 결과 보고: 응시 결과를 표현하는 형식. 개별 응답 값과 산출된 점수를 함께 담아, 시행 시스템이 아닌 곳에서도 채점 근거를 확인하고 재집계할 수 있게 한다.
• 패키징: 문항 및 시험 파일과 이미지 및 미디어 같은 부속 자원을 하나의 묶음으로 묶는 규칙. 부속 자원의 경로가 묶음 안에서 함께 관리되므로, 이동 후에도 이미지 누락 같은 문제가 생기지 않는다.
• 접근성 및 조정 기능: 접근성 요구에 따른 대체 표현과 조정 정보를 문항 안에서 함께 기술한다.
• 적응형 시험 지원: 응답에 따라 다음 문항을 달리 제시하는 방식을 스펙 안에서 다룬다.

작동 방식

1. 저작 도구에서 문항을 만들고, 응답 영역과 정답, 채점 규칙, 접근성 정보를 함께 기술한다.
2. 문항과 부속 자원을 규격에 맞는 묶음으로 내보낸다.
3. 문항 은행이 묶음을 받아 문항 단위로 보관하고 메타데이터로 분류한다.
4. 시험 구성 단계에서 필요한 문항을 골라 구간과 순서를 정하고 시험 단위를 만든다.
5. 시행 시스템이 시험 묶음을 받아 응시 화면을 구성한다. 이때 학습자의 접근성 요구 정보를 반영해 표시 방식을 조정한다.
6. 학습자 응답을 받아 문항에 정의된 채점 규칙으로 결과 값을 산출한다.
7. 산출된 결과를 결과 보고 형식으로 내보내 성적 처리나 분석 시스템으로 넘긴다.

국내 도입 시나리오

국내 대학과 평가 기관은 문항을 오랜 기간 축적해 재사용한다. 문항이 특정 시행 시스템의 자체 형식으로만 보관되어 있으면 시스템 교체 시 전량 변환이 필요하다. QTI 형식으로 보관하면 저작, 보관, 시행을 분리해 조달할 수 있고, 축적된 문항 자산을 유지하면서 시행 환경만 교체하는 선택이 가능해진다.

초중등 영역에서 여러 공급사의 평가 도구를 함께 쓰는 경우, 문항 형식이 통일되어 있으면 도구 사이에서 문항을 옮기거나 공동으로 문항을 확보하는 방식을 검토할 수 있다.

접근성 요구가 있는 학습자를 위한 조정을 시행 시스템마다 별도로 설정하는 대신, 문항 자체에 조정 정보를 담아 관리하는 방식도 QTI가 지원하는 적용 형태다. 조정 내용이 문항과 함께 이동하므로 시행 환경이 바뀌어도 같은 조정을 재현할 수 있다.

여러 기관이 문항을 공동으로 확보해 함께 쓰려는 경우, 형식이 갈리면 통합 자체가 성립하지 않는다. 문항 형식과 메타데이터 규격을 먼저 표준으로 맞추면 이후 참여 기관이 늘어나도 같은 절차로 문항을 주고받을 수 있다.

적합성 인증

1EdTech는 QTI에 대한 적합성 시험을 운영하며, 인증은 두 갈래로 나뉜다. 하나는 애플리케이션 인증으로 기본(basic)과 고급(advanced) 등급이 있고 연 단위로 갱신한다. 다른 하나는 콘텐츠 패키지 인증으로, 콘텐츠가 변경되지 않는 한 갱신할 필요가 없다.

애플리케이션 인증의 종류는 저작(Authoring), 가져오기(Import), 내보내기(Export), 가져오기 및 내보내기(Import and Export), 시행(Delivery)으로 구분된다. 문항을 내보내는 제품과 받아 시행하는 제품이 같은 버전에 대해 인증을 받아야 실제 교환이 성립하므로, 도입 검토 시에는 인증 버전과 종류를 함께 확인해야 한다. 인증 제품은 TrustEd Apps Directory에서 확인할 수 있다.

관련 표준

• LTI: 학습 플랫폼에서 평가 도구를 런치하는 연결을 담당한다. QTI가 문항 내용을 정의하고 LTI가 도구 진입 경로를 정의하는 관계다.
• OneRoster: 평가 결과 점수를 성적부의 평가 항목으로 반영하는 지점에서 이어진다.
• CASE: 역량 및 교육과정 체계를 교환한다. 문항을 특정 역량이나 성취기준에 연결할 때 그 체계를 CASE로 참조한다.
• Caliper: 평가 진행 중 발생하는 활동 데이터를 수집하는 형식을 정의한다.
• AccessForAll: 접근성 요구와 자원 특성을 기술하는 표준으로, QTI 3.0의 접근성 및 조정 기능과 개념적으로 이어진다.

원문 자료

• 게이트웨이: https://www.1edtech.org/standards/qti
• QTI 스펙 문서 모음: https://www.1edtech.org/standards/qti/index
• 버전별 비교: https://www.1edtech.org/standards/qti/versions
• QTI 3 접근성: https://www.1edtech.org/standards/qti/accessibility
• QTI 3.0 개요: https://www.imsglobal.org/spec/qti/v3p0/oview
• 모범사례·구현 가이드: https://www.imsglobal.org/spec/qti/v3p0/impl
• QTI 인증 절차: https://www.1edtech.org/certification/qti
• 조달 요구사항 예시: https://www.1edtech.org/standards/qti/rfp-procurement-agreements

이 요약은 1EdTech의 공개 자료를 바탕으로 1EdTech Korea가 작성했습니다. 기술적 세부사항은 원문 스펙을 기준으로 합니다.