국가(유럽)수준 의사면허시험에 대한 다섯 가지 신화

1

유럽의사면허시험은 매혹적인 것이지만, 부작용은 충분히 논의되지 않았다. 다섯 가지 신화를 하나씩 살펴보자.

 

2

신화 1: 유럽의사시험 혹은 의사국가시험은 의료행위에 있어서 중요한 영역을 평가하게 해줄 것이다.

 

아니다! 중앙화된 시험은 가장 중요한 학습성과 대신 국가(혹은 유럽) 수준에서 쉽게 평가가능한 것을 강조할 것이다. 시험의 초점은 written exam에 맞춰질 것이고, MCQ가 주를 이룰 것이며, 임상술기나 태도보다는 지식을 평가하게 될 것이다. Schuwirth가 주장한 것처럼 국가시험은 '낮은' 레벨의 스킬에 초점을 두게 되나, 최근의 추세는 프로페셔널리즘, 스칼라십, 과학적 사고 등의 '높은' 수준의 스킬을 강조한다. 과거에는 측정에 대한 논쟁에서 '신뢰도'를 강조했지만, 이제는 'systemic validity'의 개념을 강조하는 데에 이르렀다. 이것은 교육시스템, 교육과정, 교육변화instructional change에 대한 것이다. 중앙화된 시험은 덜 중요한 학습성과를 평가하게 되면서, 교사의 교육과 학생의 학습 패턴에 영향을 주어 뒤틀리게 한다.

 

3

신화 2: 유럽의사시험 혹은 의사국가시험은 평가행위assessment practice의 향상을 가져올 것이다.

 

아니다! 현재의 근거를 보면, 중앙화된 시험이 있는 시스템에서는 평가의 혁신은 저해된다. NMBE는 아마도 평가 전문가들로 구성된 중앙 팀의 가장 좋은 예이며, [평가의 실천]과 [현장의 이해]에 국제적으로 중요한 기여를 한 것이 사실이다. 그러나 NBME와 같은 기구의 우선순위는 필연적으로 달라야 하기 때문에, 평가 실무의 최첨단cutting edge에서 작업work하고, 현장에서 새로운 이니셔티브를 이끌기에 적합하지 않다. 비슷하게, Peter Scoles는 NBME가 미국에서 문지기 시험Gateway Examination의 지위를 갖게 되면서, USMLE를 변화시키기 위해서는 6~10년의 시간이 필요하게 되었다고 강조하였다. 의과대학의 졸업시험으로 OSCE가 처음 도입된 것은 30년 전이었지만, 다수의 의과대학에서 이미 그것을 도입한지 수 년이 지나서야 중앙화된 시험에 도입되기 시작하였다는 사실도 반례가 될 수 있다.

 

더 나아가서, 중앙화된 시험에 대해서는 근본적인 우려가 있는데, 그 특성상 평가에 대한 낡은outmoded 관점을 가질 수 밖에 없고, 학생들로 하여금 평가란 교육과정이나 교육 프로그램에서 분리되어 어느 한 시점에서 가장 잘 이뤄질 수 있는 것이라는 오해를 가지게 만든다는 것이다. Schuwirth는 '역량의 관점에서, 이러한 시험(한 차례로 끝나는 시험)은 평가와 교육의 misalignment를 가져온다'고 지적했다.

 

평가는 교육 프로세스의 (외부적) 결과 측정이 아니라, 교육 프로세스의 (내부적) 핵심 부품으로 인식되어야 한다. 또한 평가는 psychometric measurement problem으로만 인식되어서는 안 되며, 교육설계의 문제educational design problem로 인식되어야 한다. 즉, 평가의 목적은 단순히 한 학생의 기준충족여부를 결정하는 것이 아니라, 특정 학생의 역량에 대한 정보를 바탕으로 개개인의 요구에 맞춰 수업과 과목을 tailor하는 데 사용되도록 하는 것이어야 한다. 무엇보다도 이것은 평가가 교육과정에 통합되어야 (교육이 끝날 때 single-shot으로 하는 것이 아니라) 가능할 것이다.

 

4

신화 3: 표준화와 국제화의 시대에, 유럽의사시험 혹은 의사국가시험은 uniformity를 향상시킴으로서 우리의 요구를 충족시킬 것이다.

 

아니다! 의심할 여지 없이, 모든 학교에 해당되는 핵심 역량이 있고, 공통의 평가가 적절한 부분이 있지만, 중요하고 유의한 차이 또한 존재한다. UK에서는 GMC가 'promoting equality and diversity'를 질관리프로그램의 한 목표로 지정하고 있다. 또한 국제적으로 기증자(donor) 국가에 의해서 주도되는 시험을 활용하게 된다면, 전 세계적으로 인지적 성취를 강조하는 결과를 초래함으로써, 좋은 교육은 무엇인가에 대한 로컬한 가치는 무시하는 결과로 이어질 것이다.

 

5

신화 4: 의사국가시험은 시스템의 퍼포먼스를 추적할 수 있는 지표이다.

 

Smith는 '성능 데이터 출판publication으로 인한 의도하지 않은 행동 결과의 수많은 사례'를 언급하며, 그 예로 '터널비전, 최적화미달, 근시, 측정 고정, 게이밍, 골화, 오역 및 잘못된 표현'과 같은 문제를 기술했다. (Smith (1995) identified a ‘huge number of instances of unintended behavioural consequences of the publication of performance data’ and described problems such as ‘tunnel vision, sub-optimization, myopia, measure fixation, gaming, ossification, misinterpretation and misrepresentation’.)

 

또 다른 연구자는 지표indicator는 복잡한 상황을 제대로 반영하지 못할 수 있으며, 각 기관이 지표에만 초점을 맞추려 노력하는 ‘게이밍’이 발생하여 시스템이 훼손될 가능성을 지적했다. Hecker and Violato의 연구에 따르면, 의사국가시험의 퍼포먼스를 교육과정평가의 지표로 사용할 때 문제가 발생할 수 있다. USMLE 점수에 기반하여 이들은 '의학교육개혁의 변화는 학생의 성취에 별다른 영향을 주지 못한다'는 결론을 도출하면서도, 동시에 종속변수는 면허시험 점수이며, 의사의 중요한 특성인 공감/문제해결/임상추론 등을 평가하지 못한다는 한계를 인지하고 있었다.

 

표준화된 시험과 고정된 교육과정의 문제는 가장 중요하게 다뤄져야 할 유형의 교육을 죽인다는 데 있다. 그러나 학생이 고득점으로 시험을 통과하게 도와주려는 선생의 노력을 누가 비난할 수 있겠는가? 문제는, 표준화된 시험이 전체 학교 시스템을 평가하는 자료로 사용되는 상황에서 학생이 이 시험에서 좋은 성적을 받도록 가르치려는 유혹을 피하는 것은 거의 불가능하다는 사실이다.

 

6

신화 5: 유럽의사시험 혹은 의사국가시험은 더 안전한 의료행위를 하게 해서 공공을 보호할 것이다.

 

아니다! 중앙화된 시험이 존재하지 않는다고 해서 수준미달의 의사를 양성한다는 근거는 없다. 또한 그러한 시험을 도입한다고 향상된다는 근거 또한 없다. 의사국가시험이 없는 UK의 의과대학 졸업생이 진료역량 측면에서 의사국가시험이 있는 미국의 의사보다 열등하다는 근거는 없다. 또한 Papadakis는 medical board가 진료중인 의사에게 시행한 징계조치(displinary action)가 (의사면국가시험에서 측정된 퍼포먼스보다) 비전문직업적 행위와 더 강력한 연관이 있음을 보여준 바 있다.

 

7

전체적인 이득에 대한 근거가 없음을 고려하면, 왜 상당한 양의 자원이 유럽의사시험 혹은 의사국가시험에 투입되어야 하는가를 물어야 할 것이다. 의사국가시험의 도입과 활용에 대한 단계를 아래의 여섯 가지로 나눠볼 수 있다.

(1) Assessment procedures in the medical school are completely independent with no external standards.

(2) The school’s assessment procedures are subject to external inspection and approval in line with specified standards (such as those offered by the WFME).

(3) Examinations in a school are monitored by external examiners including student pass/fail decisions (the current practice in the UK, with the process quality assured by the General Medical Council).

(4) Assessment instruments and some questions are shared between schools and common questions are introduced in examinations.

(5) Students are required to take and pass both an internal school examination and an external European or national examination.

(6) Only a single European or national examination is taken by the student.

 

 

출처: 

Harden, R. M. (2009). Five myths and the case against a European or national licensing examination. Medical Teacher, 31(3), 217-220.