自2003年開始，國家醫(yī)學(xué)考試中心在醫(yī)師資格考試醫(yī)學(xué)綜合筆試、全國醫(yī)學(xué)博士外語統(tǒng)一考試兩個標準參照考試中，研究基于考試內(nèi)容的專家判斷法確定合格線。
一、目的與意義
醫(yī)師資格考試合格線的確定直接關(guān)系到我國醫(yī)師隊伍準人質(zhì)量的控制，關(guān)系到我國醫(yī)師隊伍的建設(shè)，關(guān)系到醫(yī)療機構(gòu)醫(yī)教研水平的提高。全國醫(yī)學(xué)博士外語統(tǒng)一考試合格線的確定關(guān)系到醫(yī)學(xué)博士研究生入學(xué)的質(zhì)量。國家醫(yī)學(xué)考試中心研究基于考試內(nèi)容的專家判斷法是為了更加科學(xué)、合理、客觀地確定考試合格線，進一步提高考試的決策科學(xué)化水平。
二、研究的方法
1.采用基于考試內(nèi)容的專家判斷法。標準參照考試不同于選拔考試，不宜預(yù)先設(shè)定通過率（常模參照)。在標準參照考試中，基于考試內(nèi)容的專家判斷法是目前國際上確定合格線的通行做法。它是從考試的目的出發(fā)，由學(xué)科專家對最低勝任能力（處于及格分數(shù)邊緣)的考生正確回答題目的概率做出判斷，由此估計考生對知識、技能的掌握程度的方法。它包括Angoff、Ebel、Nedelsky法等。它能客觀反映考生是否具備了達到合格標準所必須的專業(yè)知識和技能。該方法一般要經(jīng)過以下過程：
1、專家培訓(xùn)。介紹考試目的、內(nèi)容和形式，討論合格與淘汰的重要意義，了解確定合格標準的一般程序，學(xué)習(xí)確定合格標準的特定方法。
2.界定最低勝任能力的考生。根據(jù)經(jīng)驗豐富的學(xué)科專家對考生及其工作情境的認知，討論最低勝任能力考生所具有的知識和技能，對最低勝任能力考生形成較為明確的認定。
3.判斷練習(xí)。利用附有正確答案的典型試題進行練習(xí)，幫助專家形成相近或一致的判斷。
4.正式判斷。估計和判斷最低勝任能力考生正確回答問題的概率。
5.統(tǒng)計分析。取全部專家對所有試題判斷結(jié)果的平均值作為學(xué)科合格標準。在此基礎(chǔ)上，再綜合考慮各種因素，確定最終考試合格線。這與現(xiàn)行的基于通過率確定合格線的方法相比，更為科學(xué)、合理和客觀。
三、研究工作簡介
2003年，國家醫(yī)學(xué)考試中心在口腔執(zhí)業(yè)醫(yī)師綜合筆試中，開始嘗試采用“Angoff”法確定合格線。聘請學(xué)科專家46名，分16組分別對本學(xué)科試題進行逐題判斷醫(yī) 學(xué)全,在線.搜集.整理jfsoft.net.cn。最后，統(tǒng)計各學(xué)科專家判斷的平均判斷區(qū)間，并累加得出的合格標準范圍在278分～338分之間，意味著2003年口腔執(zhí)業(yè)醫(yī)師資格考試的合格標準不應(yīng)高于338分，不應(yīng)低于278分。將平均判斷區(qū)間的中位數(shù)308分作為合格線參照點，考慮到醫(yī)療行為屬于高風(fēng)險行業(yè)，合格標準應(yīng)適當上移，取高端中位數(shù)323分作為最終合格線。
2004年3月在全國醫(yī)學(xué)博士外語統(tǒng)一考試中，國家醫(yī)學(xué)考試中心聘請9位具有醫(yī)學(xué)博士研究生英語教學(xué)經(jīng)驗的專家采用基于考試內(nèi)容的專家判斷法確定英語考試參考合格分數(shù)線，采用了4種判斷方式，包括以邊界組考生為對象的單題判斷和試卷判斷，以考生總體為對象的對當年試卷的判斷等。最后取四種判斷區(qū)間之間交集48分一52.8分的中位數(shù)50.4分，再取整50分為合格標準。合格線結(jié)果得到各高等醫(yī)學(xué)院校的認同。2004年11月，國家醫(yī)學(xué)考試中心聘請73名專家，采用“Angoff”法對2004年醫(yī)師資格考試醫(yī)學(xué)綜合筆試兩級（執(zhí)業(yè)醫(yī)師、執(zhí)業(yè)助理醫(yī)師)三類（臨床、口腔、公共衛(wèi)生)共6個類別的試卷合格標準進行判斷。