全文翻譯至: https://thebarexaminer.ncbex.org/article/test-development/how-are-questions-written-for-ncbes-exams-part-one/
又到了美國律師考試日期倒數的七月啦~許多小夥伴們紛紛擔心:今年新出的最高法院判決會不會納入七月份的考題中?去年的七月份也發生過類似情況,出題中心 NBCE 更是發了一個聲明,告訴大家不需要擔心新的判決,我們也在去年跟大家介紹過,關於美國最高法院新判決多久會出現在美國律師考試裡的文章。那麽小夥伴們是否也開始好奇:US BAR 應試考題裡,每位考生要作答的選擇題 (MBE),究竟是怎樣產生出來的?
為了讓考生們更了解每年的律師考試考題,NCBE 特別請了官方的出題委員現身說法,分享每年 NCBE 四種考試 (MBE/MEE/MPT/MPRE) 考題的產出過程。今天,我們就帶大家進入 NCBE 的”後廚”,來看看對於非母語考生相當重要的選擇題考題 (MBE) 是如何被”烹調”出來的吧!
小夥伴如果還沒看過,NCBE 針對美國最高法院的新判決多久會在 US BAR 考試中出現的官方說明
【美國最高法院的新判決多久會在 US BAR 考試中出現、大考中心 NCBE 官方聲明來了!】
1. 前言
NCBE 四門考試(MPRE / MBE / MEE / MPT)的考題編寫過程,涉及十個出題委員會共65名成員的出題、審查和修訂等多個階段。其中七個委員會負責 MBE 選擇題的部分(每個科目各一個),MEE、MPT 及 MPRE 則各有一個委員會負責。這些委員會成員,由來自25個司法管轄區、35所不同法學院的律師、法官與教職人員組成,並由 NCBE 的律師編輯協助。
NCBE 的選擇題考題均有所謂的〝測試題〞,測試題會混在每年的正式考試中,且不會計分。例如,MBE 的200題考題中,就有25題是不計分的測試題;MPRE 則是60題中,有10題測試題。因此同學們如果遇到難題或是沒見過的考點時,先別驚慌,說不定就是測試題哦!
2. MBE 的出題框架
MBE 選擇的出題程序可以長達三年之久,最一開始是由七個委員會的委員,根據NCBE提供的內容,各自撰寫考題。例如合同的考題,NCBE就會給出題者"contract formation"、"contract content and meaning" 這樣的主題,由出題者自行草擬題目。而出題者為了出題,會收集各種數據,例如案例、論文、法律解釋以及自身作為教授、律師、法官的從業經驗。
出題者在構思一個選擇題時,有五個原則必須遵守:
(1) 題目必須簡明扼要、
(2) 在必要範圍內盡量使用最少量的人物與事實、
(3) 考點不能是瑣碎或晦澀的概念、
(4) 要能測試考生的法律知識以及適用法律原則的能力、以及身為律師的技能與策略,不能只是死記硬背。
而題目會遵照下圖的架構,由五個部分組成(以一個證據法的題目為例):
圖片來源:https://thebarexaminer.ncbex.org/article/test-development/how-are-questions-written-for-ncbes-exams-part-one/1. Stem (The Factual Scenario)
題幹,題目的背景與事實。
出題者須力求明確清楚,在能明確考點與選項的前提下使用最少量的人物與事實,且必須避免使用有性別、種族、地區偏見的詞匯。
2. Lead-in (The Call of the Question)
題目要問的重點。
必須是一個清楚且聚焦的完整問句,確立考生在本題的任務。要避免使用被動句、不完整的句子、或添加題幹中沒有的信息。出題者也會通過設計不同的 Lead-in 來測試考生不同的能力。例如常見的 "predictive outcome lead-in" (舉例:原告在本件訴訟中是否會獲勝?) ,強調考生結合法律與事實來推斷結果的能力;又或者 "practice-oriented lead-in" (舉例:律師此時該提出何種抗辯?),強調考生在實務上解決法律問題的分析能力,以及邏輯框架方面的思維。
3. Options (The Potential Answers)
選項。包含一個 Key (The correct answer) :正確答案、以及三個 Distractors (The incorrect answers):有誤導作用的錯誤答案。
選項除了力求簡潔明確,四個選項的撰寫風格也必須雷同。除了正確答案必須明確無爭議,也要求所有選項都能與題幹和 Lead-in 問句的信息相呼應,使其有所依據。
3. MBE 題目的審查
在個別委員根據以上流程出完題目後,將會進行審查程序,包含 NCBE 考試編輯審查、外部專家審查、以及全體委員會審查和測試考試三大部分。
在完成出題後,出題委員會將題目送交 NCBE 負責該委員會的考試編輯,編輯會依照上述 NCBE 的標準仔細審查該題目,例如:題幹是否明確、Lead-in 是簡單明確的句子、選項撰寫風格一致且僅有一個正確答案、題目所測試的考點是重要的,且案情的設計是符合現實的等等。出題委員也會提供相關的批注數據,如法條或案件,來協助編輯進行題目的審查。審查完成後,編輯會給出審查意見,出題者則可以撰寫響應。
在新的題目進入每個委員會的題目庫後,還會接受來自外部的兩位專家的審查。外部專家除了進行如上述編輯的審查,還會確認考題的難易度、是否有一個以上的正確答案、考題的內容是否有不當的偏見詞匯等等。外部專家的意見將會提供給該委員會的全體,以利後續的討論與審查。
出題委員會一年開兩次會,在開會前委員們會先閱讀會議要討論的資料,包含已經受外部委員審查的新題目、以及沒有通過 NCBE 統計標準的測試題。委員也會審查主席和考試編輯所選出的,將會在未來的 MBE 考試中出現的題目。
在會議中,委員們基於考試編輯與外部專家的意見,通過討論、交流與合作來修改題目。如果在會議中不能解決,將會將題目交由個別委員繼續修改,留待下次委員會討論 (或直接廢棄),已修改或沒有問題的題目,則會進入測試題的題庫中。
在會議後,考試編輯與委員會主席將會從上述的測試題題庫中,挑選進入正式考試的測試題。NCBE 每次考試都會仔細的評估考生在測試題的表現,觀察其統計資料是否符合 NCBE 的標準。如同前面提到的,沒有符合統計標準的測試題一樣會回到委員會中,由委員們開會時決定要修改或直接廢棄該題目。而符合統計標準的測試題,一樣要再回到委員會,由委員們在半年一次的會議中再次審查,最終才會成為正式有計分的題目。
以上就是來自大考中心 NCBE 出題委員對 MBE 選擇題出題架構的說明,相信小夥伴們看完後也對 MBE 的出題脈絡有更清楚的認識:MBE 題目多為簡明扼要、在必要範圍內盡量使用最少量的人物與事實、較不會考瑣碎或晦澀概念,目的在於測試考生的法律知識和適用法律原則的能力,以及是否具備身為律師應有的技能。
不管是正在 / 正要備考的小夥伴們,都不用害怕,我們一直關注並緊跟著最新 NCBE 的出題趨勢調整教材,只要跟著 Point 的課程進度,按部就班的聽課、練習題目,不會的問題還有 Point 最專業的答疑老師咨詢,詳實回答同學們的疑惑,相信大家都能在考場上旗開得勝、金榜題名!
留言
張貼留言