語言測驗．評量．教學

2011年3月 辭彙測驗編製工作坊 線上觀看 簡報 (PDF)

2010年12月中區夥伴大學全民英檢簡報 線上觀看 簡報 (PDF)

Abstract This dissertation discusses the effect of intra-task variations in association with performance conditions on task difficulty in a semi-direct speaking test, namely, the GEPT-I. The variables identified for investigation are linguistic demand of task input in relation to code complexity; amount of time allowed for performance in relation to communicative demand; type of pre-task planning in relation to communicative demand; and test-takers’ familiarity with the non-verbal propositional content of the task input in relation to cognitive complexity. The dissertation takes a multi-dimensional approach in measuring the effects of the variables in a comparison of data collected from the performances in a controlled task and in an experimental task. The dimensions of the comparison are based on three different sources of data, including task scores, test-takers’ responses to the post-task questionnaires eliciting views of difficulty, and interlanguage measures in the areas

原文刊載於 中華民國 91 年 11 月 8 日 《 中央日報．英語教與學 》 近年來國內受到英語學習的熱潮帶動，各種大規模的英語測驗隨之興起。以「全民英檢」為例，一次測驗即達五、六萬人報考，就像一場小型的聯考，可見英語測驗的重要性已被大家認定了。英語測驗的重要性是什麼呢？簡單的說，它是用來檢驗英語學習的成果，其成績甚至可被採用做為學校入學、畢業的參考，或是被企業、機關當做是用人的依據。因此，測驗的成績實際上攸關個人的前途、事業，其重要性當然就不用多說了。 站在參與「全民英檢」研發與辦理者的立場，看到「全民英檢」受到社會各界的採用、肯定，作者感到非常的高興。但是同時作者也觀察、感受到考生、老師和家長對測驗的緊張與不安。當然，考試對絕大多數的人而言，是讓人緊張的。下面這首由愛爾蘭小說家麥克卡恩（ J. McGahern ）所寫的詩，就真實的描繪出學生應考前焦慮、不安的心境。考生擔心考試成績不理想，而祈求上天保佑能得高分贏過別人。 * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * ** * * * Please God may I not fail Please God may I get over sixty per cent Please God may I get a high place Please God may all those likely to beat me get killed in road accidents and may they die roaring. * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * * ** * * * 根據作者對「全民英檢」的考生所做的觀察，其緊張與不安的來源之一，是對測驗本身的不了解，有些考生懵懂的隨著同學、朋友一起報考，有些則是在學校、補習班鼓勵下來參加考試，對於測驗目的、方式、應考規則等並不在意。因此，作者建議老師們在幫助學生準備考試時，應該對學生先進行心理建設，幫助學生了解考試是一項正常的學習活動，盡量以平常心應對。 另

原文刊載於 中華民國 91 年 3 月 23 日 《 中央日報．英語教與學 》 國內近來掀起了一股英語能力檢測的熱潮，各種英語測驗紛紛出籠，如全民英檢、托福、愛普、多益、劍橋認證等。這些測驗各自標榜特色，有的強調測驗簡單易考、有的則是強調含聽、讀、說、寫四項測驗的全方位英語能力評量，讓大家真是眼花撩亂。而對有興趣要報考英語測驗的人來說，更是難以做選擇。其實選擇英語測驗就像選購商品一樣，除了功能、價格等因素外，最重要的就是品質了。賣毛衣的商家為了說明商品的品質良好，會說所賣的毛衣絕對是純羊毛做的，而多數人大概也知道如何判斷羊毛衣的真假。相對於賣毛衣的商家，辦理英語測驗的機構會以測驗具有「信度」與「效度」來說明測驗的品質，專業的測驗機構甚至會提出些數據加以補充說明。但是很多人卻連「信度」與「效度」這兩個名詞的意義是甚麼都弄不清楚，更別提判斷其所言的真假了。 事實上，「信度」與「效度」是測驗理論的術語，一般人較感陌生。作者從事「全民英檢」的研發工作，認為測驗單位應有責任提供測驗的使用者（ stakeholders ）有關「信度」與「效度」的資訊，協助大家了解，以便在選擇採用英語測驗時做出正確的判斷。 壹、「信度」（ reliability ） 信度是指測驗分數可靠的程度，也就是這一測驗受信賴的程度。而一測驗為甚麼會受到信賴，關鍵在於結果的一致。同一位考生在能力沒有變化的前提下，在不同時間或不同的測試狀況下重複受測，其所得的分數應該是一致的，否則就產生測驗的誤差。一個測驗有誤差是難免的，但是當誤差過大時就影響了測驗的公平性了。測驗理論上有一個基本假定：實得分數等於真實分數加上誤差（ X=T+E ），但是真實分數是一個未知數。例如甲生考了某英語閱讀測驗的 A 卷得到 80 分，一天後考了 B 卷得了 82 分。雖然有 2 分的差距，但這是可被接受的誤差值，顯示該測驗結果的一致性頗高。又例如乙生考了某寫作測驗，閱卷老師 A 給 60 分，閱卷老師 B 給 62 分，這個結果顯示評分標準相當一致，而測驗的信度自然就高。總之，實得分數與真實分數愈接近即表示誤差愈小，測驗的分數就愈能代表考生的能力，如此，測驗的可信度也就愈高。 貳、「效度」（ validity ） 測驗效度即指測驗分數的正確性，簡單的說，就是指一測驗是否評量到它所要評量的

原文刊載於中華民國 91 年 2 月 10 日 《 中央日報．英語教與學 》 「全民英檢」的初、中、中高級均含寫作測驗，主要目的是評量考生的文字表達能力，也就是語言的使用能力。有別於聽力、閱讀能力測驗之使用客觀題、採電腦閱卷，寫作測驗則是主觀題，需要由專業的評分老師做人工評分。既然是人工評分，則難免因評分老師的個人主觀判斷或個人因素（如疲倦）影響評分。要使寫作評分能正確的反應考生的真實寫作能力，如果排除考生本身的因素，則命題與評分是最關鍵的兩個因素。 為提高評分的一致性（ inter-rater consistency ），「全民英檢」的寫作測驗題型不是「自由寫作」（ free writing ），而是「引導寫作」（ guided writing ），利用圖片、大綱等提示明確的要求考生寫作的內容。這種「引導寫作」的測驗方式有助於降低評分老師的主觀判斷。然而對寫作評分影響最大的還是評分過程。不同的評分老師可能閱了同一篇作文而給了不同的分數，因此如何建立評分者之間的一致性（ inter-rater consistency ），也就是評分的信度（ reliability ）是非常重要的。評分的信度越高，（信度越接近 1 ）表示評分者之間的給分標準趨於一致，評分越可靠。一般而言，信度達 0.85 以上時，就表示評分相當可靠。 「全民英檢」一向重視閱卷信度的確保，採取質量並重的控管措施盡量減低評分者的評分誤差。開辦兩年以來，寫作測驗與口說能力測驗的評分信度均保持在 0.86-0.90 之間，達到不錯的水準。這個數值與大家所熟知的「托福」寫作測驗（ TWE—Test of Written English ）、口說能力測驗（ TSE—Test of Spoken English ） 0.87-0.90 的信度相當。我們是怎麼辦到的？本文特別針對「全民英檢」的寫作測驗評分程序提出說明（口說能力測驗的評分程序與寫作測驗類似，故不重複），希望有助於外界對「全民英檢」的認識。 一、「全民英檢」各級寫作測驗均訂有評分指標（ 0-5 級分），評分人員在確切掌握評分指標後，依據考生的整體表現評分。每一篇作文皆由兩位評分老師分別獨立評分，若兩者評分差距在 1 級分以內，求其平均值；兩者評分差距大於 l 級分以上，則由第三位（資深）評分老師複閱，並以其評分為最

原文刊載於中華民國 91 年 4 月 《 中央日報．英語教與學 》 繼「全民英檢」高級閱讀能力測驗及寫作能力測驗之後，本文將為讀者介紹口說能力測驗。以下分別就測驗題型、評分重點及應考準備方向做說明。 測驗題型 「全民英檢」研究委員會訂定之高級口說能力測驗目標為「英語流利順暢，僅有少許錯誤，」應用能力擴及學術或專業領域」，依據該目標，高級口說能力測驗設計為三個部分，分別是「暖身面談」（ Warm-up Interview ）、「訊息交換」（ Information Exchange ）及「申述」（ Presentation ）。 不同於目前「全民英檢」其他級數的口說能力測驗，高級口說能力測驗採考生與主考 （ Interlocutor ） 面對面的施測方式（ OPI, Oral Proficiency Interview ），每場測驗均有兩至三名考生參加。測驗全程錄音、錄影， Interlocutor 負責向考生提問並依據整體式評分量表給分，試場內的另一主考（ Assessor ）則負責依據分項式評分量表給分。分項式評分與整體式評分的優缺點在文獻上多有論述（ Hughes, 1989; Bachman & Palmer, 1996 ）。 高級口說能力測驗採整體式及分項式評分並行制，可達到兩種評分方式相互驗證的目的（ Hughes, 1989 ）同時提高評分者信 度。 兩項量表計分由低至高分為 l~5 五個級分， 3 級分為通過標準。下文即針對高級口說能力測驗之內容做進一步說明。 ＊ 第一部分「暖身面談」：為考生與主考之間的交談，以問答的方式進行，約五分鐘，主要評量考生自我介紹及回答問題之口語能力。 ＊ 第二部分「訊息交換」：包括考生相互之間訊息交換、討論及回答主考提問等，約七分鐘，主要評量考生口語互動與討論之能 力。 ＊ 第三部分「申述」：考生依主考所提問題思考兩分鐘後發表，另一考生則對該生之意見發表作口頭摘要，歷時約十分鐘。此主要評量考生對特定主題作較深入表述及在短時間內作口頭摘要的能力。 評分重點 高級口說能力測驗之評分重點包含發音、語調（ Pronunciation & Intonation ）、切題度（ Relevance & Adequacy ）、語彙使

原文刊載於 中華民國 91 年 4 月 16 日 《 中央日報．英語教與學 》 在本專刊中，我們曾介紹了「全民英檢」高級測驗之閱讀能力部份，本文將就高級測驗寫作能力部份作一說明。 高級寫作能力 依「全民英檢」研究委員會之規劃，本測驗主要的評量對象為「國內大學英語主修系所畢業生」或「曾赴英語系國家大學或研究所進修並取得學位者」。通過本測驗者，應具有撰寫英文摘要、報告、論文及報導等的能力；對於廣泛、不涉及特殊專業知識的主題，能以英語文清楚表達及深入探討。 因此，在高級寫作測驗的設計上，我們建構了兩項主要評量目標（一）考生能否從文字（ verbal input ）及非文字（ non-verbal input ）資料中讀解並以英文摘要其重點（ main ideas ）；（二）考生能否針對一主題，以英文清楚地表達個人看法，並作深入的討論。命題則朝整合式（ integrative ）並反應實際語言運用（ real-life language use ）兩個方向設計。 高級寫作測驗題型 高級寫作測驗共有兩題，第一題的作答時間為 60 分鐘；第二題作答時間為 45 分鐘。每題分別計時，中間不休息，總測驗時間為 105 分鐘。 第一題：考生必須先閱讀兩篇主題相關的英文文章，然後依據題目的指示，寫一篇 250 字的作文。作文內容必須包括兩篇文章的重點摘要及個人看法。每篇閱讀文章長度在 400 到 500 字之間，文章難度相當於「全民英檢」中高級的程度。此設定的主要目的在於確保閱讀活動的定位是在於提供考生相關的背景資訊，使其能針對主題抒發個人意見，而非測驗考生的閱讀能力。 第二題：考生必須解讀兩個主題相關的圖表，然後依據題目的指示，寫一篇 250 字的作文。作文內容必須描述兩個圖表所傳達的重點訊息、臆測造成圖表中現象的可能原因及提出解決該問題的建議。 高級寫作評分方式 高級寫作測驗採用的評分量表為分項式五級分量表。評分老師針對每篇文章的內容（ Relevance and Adequacy ）、組織（ Coherence and Organization ）、用字遣詞（ Lexical Use ）及文法結構（ Grammatical Use ）給一個 1 到 5 的分數。考生必須在每個分項項目中達到「 3 」

原文刊載於中華民國 91 年 4 月 10 日 《 中央日報．英語教與學 》 繼初級、中級及中高級之後，「全民英檢」將於今年六月推出相當於大學英語主修系所畢業程度的「高級」測驗。由於設定程度較高，其測驗方式已引起各界的關注。究竟要以何種方式才能測出較高階的英語能力呢？題目中是不是充滿了罕見晦澀的字彙或是冗長複雜的句子呢？為使各界對「全民英檢」高級測驗有進一步的了解，本文特別先就「閱讀能力測驗」的部份提出說明。因篇幅有限，其他各項測驗將於另文說明。 首先，在「全民英檢」五級的設計中，「高級閱讀能力」究竟為何呢？依據高級「閱讀」的分項能力指標，通過者「應能理解各類不同主題、體裁的文章，包括報章雜誌、文學作品、專業期刊、學術著作及文獻等。」更具體而言，通過者在閱讀題材的廣度、理解的深度、速度與閱讀量等方面均足以勝任學術或專業領域的需求，同時能視閱讀目的靈活運用適當的技巧與策略，有時須仔細深入的推敲某一段文字的含意，有時則須迅速掌握篇章的主旨大意，或由大量的文字中很快的找到所需的資訊。 依據上述的能力指標，高級閱讀能力測驗的命題特別著重兩項測驗目標。一為考生能否理解較長篇的文章；二為考生能否適當的運用閱讀技巧與策略，以達成不同層次的理解。因此該測驗分為兩部份，分別測試「精讀」（ careful reading ）與「略讀」（ skimming & scanning ）能力。兩部份題目印在不同的試題冊上，分別規定作答時間。茲將題型說明如下： 一、精讀：共 20 題，作答時間 50 分鐘，包含 3~4 篇文章，每篇長約 500~900 字，文章後有 4~7 個相關的問題。問題形式包含簡答題、填空題及選擇題。本部份給予考生較為充裕的時問，做較為精確深入的理解，閱讀速度要求為每分鐘 80~100 字。測試重點不僅包含文中明確表達的概念與細節，同時也測試考生能否掌握作者的言外之意、觀點及態度等。 二、略讀：共 20 題，作答時間 20 分鐘，包含數篇文章，每篇長約 600~900 字，因此考生須迅速瀏覽本部份的文章，以便在時限內完成作答，閱讀速度要求為每分鐘 150~200 字。本部份題型包含配合題、簡答題及選擇題，以下兩個樣例分別為測試「瀏覽大意」（ skimming ）與「搜尋特定資訊」（ scanning ）的技巧。 例一

原文刊載於 中華民國 92 年 1 月 3 日 《 中央日報．英語教與學 》   「全民英檢」五級的測驗當中，以初級（相當國中畢的英語文程度）的報考人數最多，佔 40 萬全部報考人數的一半。初級的通過率也高於其他級數，以其初試（含聽、讀、寫三項）而言，即有四成二的考生達通過標準（聽、讀兩項均達 80 分及寫作達 70 分）。但是，事實上考生在聽、讀部分表現不錯，近六成的考生其實在這兩項上已達通過標準。換言之，其中有近兩成考生是因為寫作成績未盡理想才未能通過初試，實在是令人感到惋惜。 新（ 92 ）年度第一次初級測驗即將於明日（ l 月 4 日）舉行，己有五萬多人報考。在測驗前夕，為協助報考者做好準備，特別藉這篇文章說明初級寫作的測驗方式，並就多數考生感到較困難的「單句寫作」部分的題型、評分標準等提出較詳細的說明。 壹、測驗方式 「全民英檢」初級之寫作能力指標訂為：「能寫簡單的句子及段落，如寫明信片、便條、賀卡及填表格等。對一般日常生活相關的事物，能以簡短的文字敘述或說明」。命題即根據上述能力指標設計，測驗時間共 40 分鐘，全部採直接寫作，以引導寫作（ guided writing ）方式為原則。各部分答題說明皆以中文書寫，試卷與答案卷分開，題目全部印在試卷上。該測驗共分兩部份（見下表）：第一部分單句寫作（包含句子改寫、句子合併、重組三種題型）和第二部分段落寫作。 初級寫作測驗題型與題數分配 分項測驗 題型 題數 第一部分 單句寫作 A. 句子改寫 5 題（ 1~5 題） B. 句子合併 5 題（ 6~10 題） C. 重組 5 題（ 11~15 題） 第二部分 段落寫作 看圖寫作 1 篇（約 50 字的段落） 貳、單句寫作題型說明 一、句子改寫：試卷上有一英文單句或簡短對話及一個未完成的句子，考生須依題目之提示將原句改寫成指定型式，並將整句謄寫於答案卷中。這個部分通常測試的重點包括改變時態、直接問句改間接問句、肯定句改否定句或問句等。下面的例題所測試的就是評量考生是否會將肯定句改寫為問句，並且會正確的使用過去式助動詞 did 。 例題： Mary went to the market. When_______________