Caliper Analytics (학습 활동 데이터 표준)

개요

한 과목을 운영하는 데에도 학습관리시스템, 동영상 도구, 평가 도구, 전자책 플랫폼이 함께 쓰인다. 도구마다 사용 기록의 형식과 항목이 다르면, 학습 분석은 도구별 통계를 눈으로 비교하는 수준에 머문다. 데이터를 한데 모으려면 도구 수만큼의 변환기를 만들어야 하고, 도구를 교체할 때마다 그 변환기를 다시 손봐야 한다. Caliper Analytics는 학습 활동을 기록하는 방식 자체를 표준화해, 여러 도구에서 나온 활동 데이터를 하나의 화면으로 통합하거나 공급사를 가로질러 분석할 수 있게 한다.

기술 관점에서 Caliper는 학습 활동을 「이벤트」라는 단위로 표현한다. 이벤트는 행위자, 행위, 대상, 시각, 학습 문맥을 갖춘 JSON-LD 문서이며, 어휘는 표준이 정의한 공통 용어집을 따른다. 도구는 Sensor라는 발신 구성 요소를 통해 이 이벤트를 수집 지점으로 보낸다. 기록 형식과 어휘가 고정되어 있으므로, 수집 쪽은 도구를 추가할 때마다 새 파서를 만들지 않아도 된다. 현재 이용할 수 있는 버전은 Caliper Analytics 1.2다.

핵심 개념

• 이벤트(Event): 학습 활동 한 건을 표현하는 기본 단위. 누가, 무엇을, 언제, 어떤 문맥에서 했는지를 담는다.
• 행위자(Actor), 행위(Action), 대상(Object): 이벤트의 세 축. 「학습자가 동영상을 일시정지했다」처럼 문장 구조에 대응한다.
• 엔티티(Entity): 이벤트에 등장하는 사람, 자원, 과목, 평가 등 명명된 개체. 각각 고유 식별자(IRI)를 갖는다.
• 메트릭 프로파일(Metric Profile): 특정 활동 영역에서 쓰는 행위와 엔티티의 조합을 정한 규약. 어떤 이벤트가 유효한지 판단하는 기준이 된다.
• Sensor: 도구 쪽에서 이벤트를 만들어 수집 지점으로 보내는 발신 구성 요소. Sensor API가 그 인터페이스를 정의한다.
• 엔벨로프(Envelope): 여러 이벤트를 묶어 전송할 때 사용하는 봉투 구조. 발신자와 전송 시각을 함께 담는다.

구성 요소

Caliper 1.2는 정보 모델, 메트릭 프로파일, 전송 규약의 세 층으로 이루어진다. 정보 모델은 이벤트와 엔티티의 구조, 필수 속성, 어휘를 정의한다. 메트릭 프로파일은 활동 영역별 규약이며, 표준 문서는 Annotation, Assessment, Assignable, Forum, Grading, Media, Reading, Session, Tool Use, Basic, Feedback, Resource Mgmt, Search, Survey, Tool Launch, Library의 프로파일을 제시한다. 구현자는 필요한 프로파일만 골라 적용할 수 있다.

전송 층에서는 Sensor API가 이벤트 발신 방식을 정의하고, 스펙 문서와 함께 제공되는 구현 가이드가 전송 메커니즘에 관한 모범 사례를 권고한다. 도서관 이용 활동을 다루는 Caliper Library Use Profile처럼 프로파일 확장 문서가 별도로 발행되기도 한다.

Caliper는 새로운 어휘 체계를 처음부터 만들지 않고 기존 1EdTech 공개 표준 위에 얹히도록 설계되었다. 과목, 사용자, 평가 같은 개념은 이미 다른 표준이 정의한 식별자를 그대로 참조하므로, 이벤트 데이터와 학사 데이터를 잇는 데 별도의 대응표가 필요하지 않다.

작동 방식

1. 도구 공급사가 자사 제품에서 기록할 활동을 정하고, 그에 해당하는 메트릭 프로파일을 선택한다.
2. 사용자가 도구에서 활동한다. 자료를 열거나, 동영상을 재생하거나, 시험을 제출하는 행위가 여기에 해당한다.
3. 도구의 Sensor가 그 활동을 이벤트로 만든다. 행위자, 행위, 대상과 과목 및 세션 같은 학습 문맥이 식별자와 함께 채워진다.
4. Sensor가 이벤트 여러 건을 엔벨로프로 묶어 기관이 지정한 수집 지점으로 보낸다.
5. 수집 지점은 엔벨로프를 열어 이벤트를 저장한다. 형식이 표준화되어 있으므로 도구별 변환 없이 같은 저장 구조를 쓴다.
6. 분석 도구가 저장된 이벤트를 조회해 대시보드, 조기 경보, 효과 비교에 활용한다.

국내 도입 시나리오

국내 대학이 학습관리시스템과 외부 학습 도구를 함께 운영하면서 도구별 접속 통계만 따로 받아 보는 경우, 학습자 한 사람의 활동을 시간 순서로 잇기 어렵다. 도구 공급사에 Caliper 이벤트 발신을 요구 조건으로 제시하면 수집 형식을 하나로 맞출 수 있고, 이후 도구를 교체해도 축적된 데이터의 연속성이 유지된다.

시도교육청이나 대학이 학습 분석 플랫폼을 도입할 때는, 플랫폼이 지원하는 프로파일 범위를 조달 단계에서 확인하는 방식이 적합하다. 필요한 활동 영역이 프로파일로 정의되어 있는지에 따라 수집 가능한 지표가 달라지기 때문이다.

국내 에듀테크 기업이 해외 기관에 도구를 공급하려는 경우, 학습 분석 연동은 검토 항목으로 제시되는 일이 많다. Caliper 적합성 인증을 받아 두면 기관별 개별 협의 대신 표준 준수 사실로 검토를 진행할 수 있다.

적합성 인증

1EdTech는 Caliper Analytics에 대한 적합성 인증을 운영한다. 인증 절차는 준비, 시험, 제출, 발급의 네 단계로 진행된다. 공급사는 인증 시험 도구로 제품을 원하는 만큼 반복 시험한 뒤 그 결과를 제출하고, 1EdTech 담당자가 결과를 검토해 인증 등록 번호와 로고 사용 안내를 발급한다. 유의할 점은 Caliper 인증이 이벤트를 생산하는 쪽(event producer)만을 대상으로 하며 수신하는 쪽(event receiver)은 인증하지 않는다는 것이다. 인증받은 제품은 TrustEd Apps Directory에 등재되어, 기관이 도입 검토 단계에서 상호운용성 검증 결과를 확인할 수 있다.

관련 표준

• LTI: 플랫폼과 도구를 연결한다. LTI의 선택 서비스인 Caliper Analytics Connector는 런치 문맥에서 발생한 활동을 Caliper 이벤트로 전달하는 경로를 정의한다.
• OneRoster: 사람, 과목, 수강 등록 정보를 동기화한다. 이벤트의 행위자와 학습 문맥이 가리키는 식별자가 여기에서 온다.
• QTI: 문항과 시험의 표현 형식을 정의한다. QTI로 구성된 평가를 치르는 과정이 Caliper의 Assessment Profile로 기록된다.
• Common Cartridge: 학습 자원 묶음의 교환 형식이다. 묶음으로 전달된 자원의 열람 및 재생 활동이 Reading·Media Profile의 대상이 된다.
• Edu-API: 기관 행정 시스템 사이의 핵심 데이터 교환을 다룬다. 학습 활동 데이터와 학사 데이터를 함께 분석할 때 두 표준이 각각의 층을 맡는다.

원문 자료

• 게이트웨이: https://www.1edtech.org/standards/caliper
• Caliper Analytics 1.2 스펙: https://www.imsglobal.org/spec/caliper/v1p2
• Caliper 1.2 구현 가이드: https://www.imsglobal.org/spec/caliper/v1p2/impl
• Caliper 1.2 적합성·인증 가이드: https://www.imsglobal.org/spec/caliper/v1p2/cert
• Caliper Library Use Profile: https://www.imsglobal.org/spec/caliper-library/v1p2
• 적합성 인증 절차: https://www.1edtech.org/certification/caliper
• TrustEd Apps 프로그램: https://www.1edtech.org/program/trustedapps

이 요약은 1EdTech의 공개 자료를 바탕으로 1EdTech Korea가 작성했습니다. 기술적 세부사항은 원문 스펙을 기준으로 합니다.