ArticlePDF Available

How can high stakes examination in Korean medical society be improved to the international level?

Authors:
Sun Huh at Hallym University
Sun Huh
Download full-text PDF
Read full-text
Download citation
Available via license: CC BY-NC 3.0
Content may be subject to copyright.
c Korean Medical Association
This is an Open Access article distributed under the terms of the Creative Commons Attribution Non-Commercial License (http://creativecommons.
org/licenses/by-nc/3.0) which permits unrestricted non-commercial use, distribution, and reproduction in any medium, provided the original work is
properly cited.
114
의료계 고부담시험을 어떻게 국제수준으로 발전시킬 것인가?
Focused Issue of This Month
Editorial
J Korean Med Assoc 2012 February; 55(2): 114-115
J Korean Med Assoc 2012 February; 55(2): 114-115
http://dx.doi.org/10.5124/jkma.2012.55.2.114
pISSN: 1975-8456 eISSN: 2093-5951
http://jkma.org
의료계 고부담시험을 어떻게 국제수준으로 발전시킬
것인가?
허 선1,2* | 한림대학교 의과대학 1기생충학교실, 2의학교육연구소
How can high stakes examination in Korean medical
society be improved to the international level?
Sun Huh, MD1,2*
1Department of Parasitology, 2Institute of Medical Education, College of Medicine, Hallym University, Chuncheon, Korea
*Corresponding author: Sun Huh, E-mail: shuh@hallym.ac.kr
Received January 16, 2012
·
Accepted January 23, 2012
우리나라에서 의사면허를 취득하여 의료 행위를 수행하
려면 의사국가시험에 합격하여야 하고 또한 전문의로
서 활동하려면 전문의고시에 합격하여야 한다. 의료계에 중
요한 시험은 이 외도 인턴선발시험 및 전공의선발시험이 있
다. 대부분의 의대 졸업생이 치르는 시험이다. 이런 여러 가
지 시험은 자격이나 면허, 취업에 관계되는 것으로 고부담시
험(high stakes test)이라 부른다. 고부담시험은 시험 자체가
고부담이라기보다 시험 결과가 고부담이다. 예를 들어 대학
수능시험, TOEFL, 운전면허시험, 각종 면허시험 등이다. 이
런 시험은 합격과 불합격에 따라 또는 점수에 따라 수험생의
진로, 취업 등에 직접 영향을 미친다. 즉, 고부담시험은 대개
한번에 규정에 따라 치루며 명확한 합격선이 있으며 합격 여
부에 따라 이후 과정에 차이가 나는 경우 일컫는 시험이다
[1]. 이런 면에서 앞에 기술한 4 가지 시험이 의료계의 고부담
시험이다. 이외에 2001년부터 대한의학회에서 시행하는 세
부전문의자격제도에 따른 세부전문의자격시험이 있다.
2010년 3월까지 인증된 세부전문의제도는 내과계와 소아청
소년과계가 각각 9개, 수부외과, 중환자의학, 외상외과 등을
포함하여 21개 분야에서 시행하고 있다[2]. 이번 특집에서는
우리나라 의사가 대부분 접하는 고부담시험을 다루었다. 세
부전문의자격시험은 아직 전 전문의 분과에서 모두 시행하
는 것은 아니므로 이번 특집에서 제외하였다. 또한 보건 복
지부에서는 최근 2013년부터는 인턴제를 폐지해 바로 레지
던트 과정으로 들어가는 것으로 확정하였다. 그러므로 현재
인턴이나 전공의 선발제도에 조만간 변화가 올 것이므로 역
시 이번 특집에서 제외하였다.
1952년 제1회 의사국가시험을 시행하고, 1992년도 한국
의사국가시험원이 발족한 이래 1998년 한국보건의료인국
가시험원으로 확대 개편되어 의사국가시험 문항의 질과 수
준을 꾸준히 향상시켜 왔고 2009년에는 아시아 지역 최초로
임상실기시험을 의사국가시험에 도입하였다[3,4]. 이에 따
라 ‘의사국가시험에서 실기시험의 도입이 의학교육에 미친
영향’을 다루었다[5]. 저자인 박훈기 교수는 시행 공고 전부
터 이 실기시험 도입에 관여하여 핵심의 역할을 하여왔다.
실기시험 도입을 공고한 후 의과대학별로 실기시험을 시행
하고, 2009년을 전후로 임상술기실습센터를 독립적으로 대
부분 확보하게 되었으며 3, 4학년 과정에는 단순수기 실습
교육과정과 표준화환자 진료시험이 도입되었다는 것은 우
리나라 의과대학 교육 과정에서 눈에 띄게 변화한 모습이
다. 이런 교육과정의 변화가 졸업생이 임상현장에서 변화한
모습으로 반영되는 지는 아직 시행 후 짧은 기간이므로 속단
하기 어렵지만 인턴 및 1년차 전공의 모두 수기실습이 의사
대한의사협회지
115
How can high stakes examination in Korean medical society be improved to the international level?
J Korean Med Assoc 2012 February; 55(2): 114-115
로서 직접 환자를 볼 때 도움이 되었고, 임상수행평가 관련
학교교육도 인턴이나 주치의 업무에 도움이 되었다고 평가
하였다. 또한 의사실기시험이 도입된 후에 교수 입장에서는
1년차 전공의나 수련의들이 과거에 비하여 기본 임상수기를
잘하고, 환자에게 설명을 잘 하며, 환자와 의사소통이 잘 된
다는 평가를 하고 있다. 이런 자료는 앞으로 수련과정을 더
밟을 때 또는 독립하여 진료할 때 어떤 효과가 있는지 추적
조사를 통하여 수집할 수 있을 것이다. 이런 장기적인 관찰
결과는 조금 더 기다려 봐야 하지만, 임상실기시험 도입은
우선 의과대학 교육 및 졸업 후 활동에 긍정적인 영향을 미
쳤다고 할 수 있다.
의사국가시험에서 또 다른 화두 하나는 컴퓨터시험(com-
puterized testing)의 도입이다. 이미 미국이나 캐나다에서
시행하고 있으므로 우리나라가 도입하는데 이론적 및 기술
적인 문제는 별로 없다[6]. 이번 특집에서 그 동안 우리나라
에서 컴퓨터시험에 관한 연구를 정리하여 다루었다[7]. 컴퓨
터시험에는 컴퓨터바탕시험(computer-based testing), 컴
퓨터활용적응시험(computerized adaptive testing) 및 인
터넷바탕시험(internet-based testing) 및 ubiquitous-
based testing 등의 다양한 방법이 있다. 미국에서는 컴퓨
터바탕시험, 캐나다에서는 컴퓨터활용적응시험을 활용하고
있으면 한국보건의료인국가시험원에서는 2011년에 이미
ubiquitous-based testing의 모의시험을 시행하였다. 어느
것을 활용하던지 이미 의사국가시험위원회에서 2018년까
지는 컴퓨터시험을 적극 도입할 것을 건의하였으므로 그 장
단점과 구현 가능성을 파악하여 의사국가시험에도 적용할
수 있으리라 여긴다.
우리나라 정부 주관 아래 1951년 제1회 전문의고시를 시
행한 이후 2012년에 제55회 전문의고시를 시행하였다. 우
리나라 의료 발달은 전문의 제도 도입이 매우 큰 역할을 하
여 각 분과별로 빠르게 발전하여 지금은 의료 서비스 수준에
서 국제적으로 최고 수준을 자랑하고 있다. 즉 우리나라 전
문의 진료 서비스 역량이 매우 우수함을 알 수 있고, 의료 제
도 및 최신 시설 및 설비로 뒷받침하고 있다. 이렇게 발전함
에 전문의고시가 전문의 입문 최소 자격이 되므로 매우 중요
한 시험이다. 이번 특집에 대한의학회에서 오랜 기간 고시
업무에 헌신한 현 고시이사 황인홍 교수의 ‘전문의고시의 교
육측정학 과제’ 기고를 수록하였다[8]. 기존의 지필고사에서
임상수행평가, 컴퓨터시험 등을 도입하고 내용 면에서 전문
직업성을 강화하고, 의료인문학, 윤리를 추가하는 것을 제안
하였다. 전문의제도는 우리나라 의료제도의 꽃으로 국가 의
료 서비스 발전을 주도하는 기반이므로 앞으로 더욱더 역량
을 강화한 전문의 배출을 위하여 이런 다양한 방법으로 발전
시키는 것이 필요하다.
우리나라 의료계의 양대 고부담시험인 의사국가시험 및
전문의고시를 다루어 앞으로 발전 방향을 제시한 데 이번 특
집에 의의가 있다. 이러한 교육평가 분야도 의료기술의 발
전에 따른 의사의 전문성 강화 면에서 의료계도 더욱더 연구
하고 정부도 투자하여 국제수준으로 발전시켜야 한다. 의과
대학이나 각 전문 분과학회에서는 이런 발전 방향에 맞추어
교육평가 전문가를 양성하거나 외부 전문가를 초빙하여 준
비하여야 한다.
REFERENCES
21. Wikipedia. High-stakes test [Internet]. 2011 [cited 2012 Jan
15]. Available from: http://en.wikipedia.org/wiki/High_stakes_
test.
22. Korean Academy of Medical Science. Sub-specialist program
[Internet]. Seoul: Korean Academy of Medical Science; 2010
[cited 2012 Jan 15]. Available from: http://www.kams.or.kr/me
minfo/sub1.html.
23. Kim KS. President’s address: improving the quality of testing.
J Educ Eval Health Prof 2011;8:1.
24. Kim KS. Introduction and administration of the clinical skill test
of the Medical Licensing Examination, Republic of Korea
(2009). J Educ Eval Health Prof 2010;7:4.
25. Park HK. The impact of introduction of Korean Medical Licen-
sing Examination clinical skills assessment on medical educa-
tion. J Korean Med Assoc 2012;55:116- 123.
26. Lee YH. Introduction to an open source internet-based testing
program for medical student examinations. J Educ Eval
Health Prof 2009;6:4.
27. Huh S. Can computerized tests be introduced to the Korean
Medical Licensing Examination? J Korean Med Assoc 2012;
55:124-130.
28. Hwang I. Emerging tasks of specialty certifying examination:
educational measurement considerations. J Korean Med
Assoc 2012;55:131-137.
ResearchGate has not been able to resolve any citations for this publication.
Can computerized tests be introduced to the Korean Medical Licensing Examination?
Article
Full-text available
  • Feb 2012
In November 2011, the standing Committee of the Korean Medical Licensing Examination (KMLE) recommended that the National Health Personnel Licensing Examination Board introduce computerized testing to the KMLE. Therefore this article contextualizes and explores the possibility of applying computerized testing to the KMLE. Computerized testing comprises computer-based testing (CBT), ubiquitous-based testing (UBT), internet-based testing (IBT), and computerized adaptive testing (CAT). CBT refers to testing administered via a computer as the user interface, while testing with a smart phone or smart pad as the user interface is known as UBT. IBT is testing done online, and CAT is testing tailored so that each item provided fits the examinee's ability level. The benefits and drawbacks of each computerized testing option were surveyed. Among them, I propose CAT as the final goal for KMLE. In order to implement the computerized testing more effectively, it is recommended that items contain multimedia data and should involve interpretation or problem-solving. More evidence is needed to support the positive impact of computerized testing for undergraduate medical education and primary health care. Since the rapid progress of information technology such as internet bandwidth and human-computer interface methods, the introduction of computerized testing to KMLE will soon be plausible. It is possible to increase the quality of the KMLE with the introduction of computerized testing. Medical schools should prepare for the new testing environment of the KMLE by recruiting or training specialists in this field.
View
Emerging tasks of specialty certifying examination: Educational measurement considerations
Article
Full-text available
  • Feb 2012
Medical specialty systems were launched in 1951 by the National Medical Services Law. The following year, the specialty certifying examination had implemented in the form of portfolio evaluation. A paper-and-pencil type examination was implemented in 1960, and the 55th examination was carried out in January 2012. Currently, 26 specialties are represented, and the overall pass rate is over 90%. The examination consists of a step 1 paper-and-pencil test and step 2 skills test. In the step 1 test, the test items are multiple choice questions and short answer questions. Clinical performance examination is partially applied to the step 2 test. To cope with changes in the social situation and the growth of medical services, developmental changes are needed in the specialty certifying examinations. Performance assessment is an alternative worth considering. CPX should be a major part of the skill test. A computer-based test should be introduced as soon as possible, and it could eventually be developed into an adaptive test.
View
The impact of introducing the Korean Medical Licensing Examination clinical skills assessment on medical education
Article
Full-text available
  • Feb 2012
Evaluation systems can produce curricular change. Korean medical schools face a new responsibility to prepare students for the Korean Medical Licensing Examination (KMLE) clinical skills test (CST) that had been administered since 2009. Several innovations in medical education have resulted, including augmentation of hand-on skills training and a standardized patient program during clerkships. This review explored the results of a survey of 41 medical schools on the impact of the CST on medical education in Korea as of 2011. The majority of respondents reported having an independent skills training laboratory and conducting a clinical skills assessment during the third or fourth year of medical school. The preparatory undergraduate courses were perceived as helpful for self-confidence, communication with real patients, basic clinical skills for work, information sharing with patients, and getting the confidence of patients during internship and residency. However, an extreme policy emphasizing maintenance of a high pass rate has warped the curriculum with simple preparatory courses for the CST. The long-term educational outcomes of the CST of the KMLE must be evaluated again a few years later focused on searching for any relationship with a reduction in medical errors or increase in patient satisfaction in real practice.
View
President's address: Improving the quality of testing
Article
Full-text available
  • Jan 2011
The National Health Personnel Licensing Examination Board (NHPLEB) of the Republic of Korea completed the clinical skill test for the Medical Licensing Examination in 2009 and 2010 that was introduced for the first time in Asia. This was only possible due to the great amount of time devoted by the medical professors and staff of NHPLE. To improve the evaluation of what examinees can do instead of only what they know, a clinical skill test should also be administered in other health professional fields. Recently, the NHPLEB has dealt with 160,000 examinees including licensed practical nurses, caregivers, and certified health education specialists. The NHPLE will apply to the ISO 9001 certification process in 2011. Also, the work of the ad hoc team for computer-based testing will be extended in 2011. On December 14, 2010, during the meeting with the President of the Association for Medical Education in the Western Pacific Region (AMEWPR), Dr. Duck-Sun Ahn, it was agreed that the Journal of Educational Evaluation for Health Professions will be an official journal of the AMEWPR beginning in July 2011 after going through a scheduled process. Workshops for the capability on how to develop test item will be continued specific to each field so that the pool of examiners can be expanded. The year 2012 is the 20th anniversary of the NHPLEB. Thus preparations for the international conference to celebrate the 20th anniversary will begin in 2011. I appreciate all readers and the health personnel educators for their support of the NHPLEB in 2010. I will persevere in my effort to develop the National Health Personnel Licensing Examination in every way in 2011.
View
Introduction and Administration of the Clinical Skill Test of the Medical Licensing Examination, Republic of Korea (2009)
Article
Full-text available
  • Dec 2010
The first trial of the clinical skill test as part of the Korean Medical Licensing Examination was done from September 23 to December 1, 2009, in the clinical skill test center located in the National Health Personnel Licensing Examination Board (NHPLEB) building, Seoul. Korea is the first country to introduce the clinical skill test as part of the medical licensing examination in Asia. It is a report on the introduction and administration of the test. The NHPLEB launched researches on the validity of introducing the clinical skill test and on the best implementation methods in 2000. Since 2006, lists of subjects of test items for the clinical skill test has been developed. The test consisted of two types of evaluation, i.e., a clinical performance examination (CPX) with a standardized patient (SP) and objective structured clinical examination (OSCE). The proctor (medical faculty member) and SP rate the examinees' proficiency for the OSCE and CPX respectively. Out of 3,456 applicants, 3,289 examinees (95.2%) passed the test. Out of 167 examinees who failed the clinical skill test, 142 passed the written test. This means that the clinical skill test showed characteristics independent from the written test. This successful implementation of the clinical skill test is going to improve the medical graduates' performance of clinical skills.
View
Introduction to an Open Source Internet-Based Testing Program for Medical Student Examinations
Article
Full-text available
  • Dec 2009
The author developed a freely available open source internet-based testing program for medical examination. PHP and Java script were used as the programming language and postgreSQL as the database management system on an Apache web server and Linux operating system. The system approach was that a super user inputs the items, each school administrator inputs the examinees' information, and examinees access the system. The examinee's score is displayed immediately after examination with item analysis. The set-up of the system beginning with installation is described. This may help medical professors to easily adopt an internet-based testing system for medical education.
View
High-stakes test [Internet]
  • Jan 2011
  • Wikipedia
Wikipedia. High-stakes test [Internet]. 2011 [cited 2012 Jan 15]. Available from: http://en.wikipedia.org/wiki/High_stakes_ test.
Seoul: Korean Academy of Medical Science
  • Jan 2010
Korean Academy of Medical Science. Sub-specialist program [Internet]. Seoul: Korean Academy of Medical Science; 2010 [cited 2012 Jan 15]. Available from: http://www.kams.or.kr/me minfo/sub1.html.