TOCFL測驗試題設計:語料庫與能力基準整合應用

pdf
3.08 MB
9 頁
侵權投訴
加載中. ..
PDF
115
132 期華文世界
◎曾文璇、蔡怡珊、林玲英、陳柏熹 *
* 曾文璇:國家華語測驗推動工作委員會組長。
蔡怡珊:國家華語測驗推動工作委員會研發師。
林玲英:國家華語測驗推動工作委員會研發師。
陳柏熹:國家華語測驗推動工作委員會執行長。
使用華語文語料庫與能力基準整合應用系統使用華語文語料庫與能力基準整合應用系統
設計 TOCFL 測驗試題設計 TOCFL 測驗試題
1. 前言
華語文能力測驗( Test of Chinese as a Foreign Language ,以下簡稱
TOCFL ),是由國家華語測驗推動工作委員會( Steering Committee for the Test
Of Proficiency-Huayu, SC-TOP,以下簡稱華測會 )專為母語非華語的學習者檢測
華語文能力,所開發的大型標準化語言能力測驗,其測驗編制參考《歐洲共同語
文參考架構 》( Common European Framework of Reference for Languages: Learning,
Teaching, Assessment.,以下簡稱 CEFR )與國家教育研究院研發的臺灣華語文
能力基準( Taiwan Benchmarks for the Chinese Language ,以下簡稱 TBCL ), 輔
以華語文語料庫與能力基準整合應用系統( https://coct.naer.edu.tw/)進行試題設
計。以下介紹如何使用國教院語料庫與應用系統設計 TOCFL 試題。
2. TOCFL 測驗試題編制
TOCFL 測驗試題編制,首先確認試題的測驗目標以及能力指標描述,正如
CEFR 與TBCL 皆以任務、溝通導向的精神詮釋不同程度的語言能力,華語文能
力測驗的試題設計也以模擬、觀察考生在真實情境下的語言使用為原則。以編制
「進階高階級 」聽讀試題為例,須先瞭解「 TOCFL 能力指標描述 」(詳見附錄表
1) 、「 TBCL 能力指標描述 」(詳見附錄表 2), 與 TOCFL 測驗進階高階級試題
題型(下表一 ),再根據能力指標與題型要求設計試題。
116
風起雲湧
表三:TBCL 主題細項
進階高階級「能力描述 」關鍵詞為:長段落、連貫句群、廣泛且可隨時提取
的詞彙;情境包含:熟悉主題,如工作、學習、娛樂、個人感興趣之主題,與不
論場域,如專攻領域的技術性討論、多樣主題等;可理解文本類型涵蓋:對話、
演說、討論、視聽媒體內容;針對上述文本內容,可理解大意、細節、特定訊息
重點、討論主題的觀點與結論、陳述中的事件與情感,以及作者立場。
試題設計前可先參考《華語八千詞表 》或 TBCL 主題情境中的分類與細項描
述(如表二至表五 ),自真實語言使用情境如報章雜誌、廣播、電視新聞、網路
影片或文章等多元來源,選擇合適的題材、蒐集文本進行改寫或依據情境範疇自
行編寫試題。
表一:TOCFL測驗進階高階級試題題型
表二:TBCL 主題情境1
聽力測驗 閱讀測驗
對話
題 目 種 類 :單 題、 題 組 題
選詞填空
題目種 類:題組 題
段落
題 目 種 類 :單 題、 題 組 題
閱讀理解
題 目 種 類 :單 題、 題 組 題
主題情境
個人資料 自然環境 購 物、 商 店
職業 休 閒、 娛 樂 餐 飲、 烹 飪
教 育、 學 習 交 通、 旅 遊 社 交、 人 際
日常、起居 身體、醫療 社會
文化 安全 情緒、態度
公共服務 科技
1 國家教育研究院林慶隆等( 2021 )。說情話境 -華語文詞語情境分類。臺北 : 國家教
育研究院。https://coct.naer.edu.tw/download/tech_report/
情境範疇 情境主題
個人資料 姓名、出生時地、親族、語言、學歷與就業、通訊資料、習性、宗教
職業 求職、待遇、工作
教 育、 學 習 就學、學校環境、學習用品
117
132 期華文世界
表四:《華語八千詞表》主題情境2
表五:《華語八千詞表》主題細項
2 詳見華測會官網「 2022 年華語文能力測驗命題設計概述 」: https://tocfl.edu.tw/assets/
files/2022presentation.pdf
日常、起居 日常生活、居住環境、搬遷、宿舍
文化 民俗、宗教、歷史、藝術、文學
公共服務 銀行、郵務、車輛維修、加油站、領事
自然環境 動物、植物、天氣、氣候、環保、地理
休 閒、 娛 樂 影視網路娛樂、體育、觀賞表演、文化參觀
交 通、 旅 遊 大眾交通工具、個人交通工具、旅行、旅遊資訊
身體、醫療 身體、醫療
安全 安全、警消、犯罪、衝突
科技 科技、數位、網路
購 物、 商 店 日常購買
餐 飲、 烹 飪 食物、餐廳、用餐
社 交、 人 際 社交、通訊、用餐禮儀
社會 政治、經濟、法律、國際、性別
情緒、態度 情緒、態度、反應
主題情境
個人資料 房 屋 與 家 庭、 環 境 購物
工作 閒暇時間、娛樂 飲食
教育 旅行 與他人的關係
日常生活 身體及健康照護 其他
情境範疇 情境主題
個人資料
國籍、姓名、年紀、性別、住址、電話、聯絡方式、情感經驗描
述、個性、特徵、身高、體重、語言、穿著
個人經驗與情感描述、個人經歷、家族成員、家族史…
工作
工作描述、職業、工作事件交辦、休假、職務調動…
工作環境、工作權益、工安、工傷、勞資糾紛、勞工政策及其
相關議題
教育 學習、考試、教養、教育方式、教育政策及其相關議題
和教育相關物件、和圖書館借書
日常生活 生 活 作 息、 居 家 環 境 維 護
118
風起雲湧
初步檢視所蒐集題材在情境、主題和可改寫之長度或資訊量的合宜性後,
命題者可通過下述步驟進一步評估、依照施測的目的改寫材料,以成為適合用於
考試、觀察考生能力的試題文本。
以下節錄自華測會官網「試題編寫範例 」聽力試題編寫〈關注農藥自殺案背
後被忽視的農村社會問題 3〉(聽說讀寫各測驗試題編寫方式,詳見華測官網 4),
簡要說明如何使用華語文語料庫與能力基準整合應用系統設計 TOCFL 測驗試題。
首先觀察文本材料是否具備「進階高階級 」能力描述關鍵特徵。〈關注農藥
自殺案背後被忽視的農村社會問題 〉主要探討「農藥管理與使用 」,內容長且複
雜、帶有專業色彩(如農藥、自殺、心理健康 )但仍為生活可見之話題,初步判
斷符合 TOCFL 高階級與 TBCL 5 級文本特徵。
房 屋 與 家 庭、 環 境
家電設備、家具、房屋部件、房子空間配置、房屋種類
天氣狀況、自然與自然災害、自然科學、動植物…及相關議題、
環境保護、建築法規、國土政策、環境開發及其相關議題
閒暇時間、娛樂
聽 音 樂、 看 電 影 /視、跳舞、運動、個人感興趣活動 /嗜 好、 節
目表、導覽、活動表演內容、物品收藏、歷史 文物、藝術、影視、
人文、建築等相關議題與公共政策
旅行
和交通有關的廣播、問路、地點、位置、方向 /位、 交 通 號 誌、
交通工具、時刻表、路線圖、旅行計畫和此相關的議題與公共
政策
身體及健康照護
生病、看醫生、住院、開刀、傳染病、護理照顧、身體器官、醫
療保險、醫療技術、醫療體系及現況、疾病成因、公共衛生、
製藥程序、藥效…及其相關議題或公共政策
購物
錢/元、購物、租賃、服飾及其相關配件織造業及其相關製作
程序、技術研發、時尚產業及其相關話題、由商業行為衍生出
的交易、協商、談判、締約及其相關議題與經貿政策
飲食
訂位、用餐環境、食物種類、飲食物件、食譜、食材描述、美食
鑑賞、烹飪方式、各種飲食習慣、人類飲食歷史等及其相關議
題
與他人的關係 親子關係、人際關係、通訊方式、國際關係、國際局勢
3 原文網址:https://www.agriharvest.tw/archives/24768
4 「試題編寫範例 」:https://tocfl.edu.tw/index.php/teach/examples
119
132 期華文世界
因原文長度過長且包含圖表,需先經過適當裁減、重新組織改寫,且
TOCFL 進階高階級試題需控制詞彙等級,因此接著將改寫完的材料使用「 國教
院教材編輯輔助系統 」進行文本斷詞與 TBCL 詞彙等級判斷(如下圖一 ),查看
「 詞彙等級分布 」( 如下圖二 ),6級以上的超等詞彙約占文本總詞彙的 4% ,這
樣的比例較易進行詞彙等級控管,是合適「進階高階級 」測驗試題的材料。
圖一:教材編輯輔助系統。
圖二:詞彙等級分布。
120
風起雲湧
前已提到,華語文能力測驗在針對準備級到進階高階級的試題,仍希望盡
可能控制詞彙難度,尤其是作為考點的關鍵詞彙。因此在檢視文本材料的適切性
後,開始針對「超等詞彙 」或是「未收錄 」詞彙,進行檢視與替換,如為「超等
詞 」且需進行詞彙替換,可先參考「關聯替換詞語選擇器 」(圖三 )或使用「國
教院語義場關聯詞替換系統」(圖四),選擇合適的詞語替換超等詞或未收錄詞。
如在本材料中,TBCL 未收錄詞彙「輕生 」,使用查詢系統後,可以國教院 4級
詞「自殺 」替代。
如查詢結果為「 未收錄 」的詞彙,可使用應用系統中的「 基礎詞彙檢索系
統 」、「詞語分標準檢索系統 」、「漢字分級標準檢索系統 」、「語法點分級標準檢索
系統 」進行詞彙等級判別。接著依據上述資料修改、替換,且需反覆確認文意不
變、文句順暢,最後完成文本材料。
圖三:關聯替換詞語選擇器。
圖四:語義場關聯詞替換系統。
121
132 期華文世界
文本材料大致修改完成後,接著進行選項設計。高階級文本可能包含若干
專有名詞,考量 TOCFL 語言測驗主要測知考生能否使用目標語完成溝通任務,
所以此篇中出現的專有名詞,如「巴拉刈 」、「農委會 」等專名不宜設計為考點。
較適合這個等級能力的試題設計是:文本材料的主旨或大意、文本材料的重要訊
息,如:政府為什麼要禁止農民使用這種農藥;說話者的想法,如:說話者最後
提出什麼建議?
是以,可先依據文本材料內容進行分析,找出文本大意、主旨、重要訊息
與說話者的想法後,著手設計題目與確定正答。操作方式可參考下表六的文本分
析與題目設計。
表六:文本分析與題目設計
文本材料
「巴拉刈」是一種常見且毒性強烈的
農藥,如果不小心喝下,死亡率高達六
成,常 被 農 民 拿 來 當 做 自 殺 的 工 具。此 外,
相關研究指出,許多國家在禁用這種農
藥後,的確成功降低自殺率。因此政府
宣布 7月之 後, 將 全 面 禁 用 這 種 農 藥。
文本分析
大意:指出「巴拉刈」正確用途、誤用、
「 自 殺 率 」以 及 政 府 的 做 法 及 其 效 益
重 要 訊 息:政 府 的 做 法
考題 : 政府為什麼要禁止農民使用這種
農 藥?
答:主要避免農民誤用、降低危險。
消 息 一 出, 農 民 與 研 究 農 業 化 學 的
專 家 學 者 紛 紛 表 示 ,「 巴 拉 刈 」 除 草 效 果
好、價格便宜,而且對土地的汙染小。
如果沒有了快速有效的「 巴拉刈 」,政
府是否能提供其他有效又安全的措施,
否則將增加農民勞動支出與農藥使用成
本。
大意:農民、專家學者的看法
考題 : 農民、學者對這項政策的態度是
什麼?
答 : 不 看 好。 覺 得 政 府 思 慮 不 夠 周 延,
如 果 沒 有 配 套 措 施, 反 倒 造 成 農 藥 成 本
提 高。
值得注意的是,喝農藥自殺的人,
多數來自於農業人口較高的鄉村地區,
且多為老人,這與老人長時間孤單所造
成的精神疾病有關。在禁藥與不禁之間,
政府更應該思考如何加強對農民的關
心、將社會福利資源投入到農村,才能
真正解決問題。
大意 : 說明老人自殺的原因,並提出建
議
重 要 訊 息:說 話 者 的 想 法
考 題:說 話 者 最後 提出什 麼 建 議?
答:加強對農民心理方面的關心。
122
風起雲湧
最後進行誘答選項設計,需注意的是誘答選項設計必須扣緊文本材料內容,
或是話題而設計,以免造成無誘答力。設計完成的題目再以「國教院教材編輯輔
助系統 」檢視詞彙等級、使用「國教院語義場關聯詞替換系統 」替換或改寫超等
與未收錄詞彙,同時檢視題目之間是否有互相提供答案的可能性,然後完成一組
完整的進階高階級試題。
3. 結語
華語文語料庫是華語文教育產業發展的核心,其內容包括書面語、口語、
華英雙語、中介語。透過真實語料庫的驗證,使華語文學習者能力指標的建構、
分級標準等皆能符合語文使用的實際情境,進而使華語文能力測驗試題編輯與設
計具有科學的依據。▓
附錄
5 詳見華測會官網:https://tocfl.edu.tw/index.php/test/listening/list/3
表一: TOCFL 能力指標描述5
等級 聽力能力指標 閱讀能力指標
進階級 著重在語言段落的理解分析能力
當談話內容為與工作、學習、娛樂
相 關 的 熟 悉 話 題, 且 講 話 人 的 口
齒清晰、語音標準時,能了解內容
大 意 和 重 要 細 節。
著重在語言段落的理解分析能力
能讀懂個人感興趣的主題或與專攻領
域相關的文章 ; 前提是文章以淺白、
平鋪直敘的方式寫作而成。
高階級 對於具有一定篇幅且以標準語表
達的談話內容,包括專攻領域的
技 術 性 討 論, 不 論 內 容 抽 象 與 否,
都 能 聽 懂 要 點 大 意。
在閱讀時具有相當大的自主性,能因
應不同的文本及目的,採用不同的閱
讀策略和速度。具備廣泛且可隨時提
取的閱讀詞彙,但對於不常見的慣用
語,可能有理解上的困難。
123
132 期華文世界
6 TBCL 能力指標描述,依據國教院於 2018 年與華測會進行等級對應的相關研究結果
(國教院,2018 )TOCFL 進階高階級聽讀試題,其能力大致對應 TBCL4-5 級。能力指
標描述詳見臺灣華語文能力基準:https://coct.naer.edu.tw/TBCL
等級 聽力能力指標 閱讀能力指標
4級面對周遭場域,能理解較長段落、熟悉主題的對話、演說、討論及視聽媒體
的內容。能以連貫句群表達情感與觀點,進行討論與演說。
包含 499 個 漢 字、1,415 個 詞 語、15 個類詞綴、149 個 語 法 點。 1-4 級總計 1,300
個 漢 字、 2,669 個 詞 語、 40 個類詞綴、390 個 語 法 點。
能聽懂周遭場域中,以較長段落表達之熟
悉主題的對話、演說、討論及視聽媒體的
主 要 內 容。
L-4-1 能聽懂較長段落的對話之主要訊息
與 特 定 細 節。
L-4-2 能聽懂並掌握以較長段落陳述的說
明、指示及熟悉主題演說的重點。
L-4-3 能聽懂並掌握以較長段落呈現之感
興 趣 視 聽 節目之 內 容 重 點。
L-4-4 能聽懂以較長段落表達的熟悉主
題、非正式討論之觀點。
L-4-5 能聽懂以較長段落表達的熟悉主
題、正式討論之觀點。
能理解以段落呈現之文章所傳達
的 情 感 及 主 要 觀 點。
R-4-1 能理解以段落陳述的事件
與感情(信件、公告、通知)。
R-4-2 能 理 解 常 見 書 面 資 料( 宣 傳
冊子和簡短的文件)的相關訊息。
R-4-3 能理解以段落呈現之文章
所 傳 達 的 主 要 觀 點 與 結 論。
5級不論場域,能理解多樣主題篇章所表達的觀點。能以流暢的段落及有組織
的篇章表達觀點、摘要、評論或創作。
包含 600 個 漢 字、2,619 個 詞 語、29 個類詞綴、106 個 語 法 點。 1-5 級總計 1,900
個 漢 字、 5,288 個 詞 語、 69 個類詞綴、496 個 語 法 點。
能理解以流利話語表達之多樣主題、演
說、討論與視聽媒體的內容、觀點與情感。
L-5-1 能理解長篇對話的多樣主題內容、
觀 點 與 情 感。
L-5-2 能理解以流利話語陳述的多樣主題
之訊息及演說的重點。
L-5-3 能理解以流利話語呈現的電視新聞
與 訪 談。
L-5-4 能理解以流利話語表達的多樣主
題、非正式討論之內容、觀點與情感。
L-5-5 能理解以流利話語表達的多樣主
題、正式討論之內容、觀點與情感。
能理解結構完整、多樣主題之篇
章 所 表 達 的 觀 點,並 統 整 及 摘 要。
R-5-1 能歸納整理一篇文章裡不同
段 落 的 訊 息, 或 不 同 文 章 裡 的 各
種 訊 息。
R-5-2 能理解並統整多樣主題篇
章所陳述的主要觀點、比較觀點。
R-5-3 閱讀稍有難度的段落,能運
用不同的閱讀策略(推論、跳讀、
查 詢 )。
R-5-4 能理解、摘要、推論多樣主
題篇章所陳述的觀點與作者立場。
表二:TBCL 能力指標描述6
收藏 ⬇️ 下載