top of page

AI是否能取代人力?國際評比試題的評估及因應


對於大型國際評比,國內較多關注在經濟合作暨發展組織(Organisation for Economic Cooperation and Development, OECD)發展之13-15歲學生參加的《國際學生能力評量》。然而國際評比和國家產業發展,以及與國家發展的連結,也受到國際社會的重視。本文從國際成人技能評量計畫(Programme for the International Assessment of Adult Competencies, PIAAC)測驗的AI應用,談新近趨勢在AI對於教育的因應作為。

 

一、PIAAC測驗簡介

PIAAC是根據從1994年至1998年進行的國際成人素養調查(International Adult Literacy Survey, IALS)獲得的知識和經驗制定的。OECD 於 2013 年開始實施三輪調查,針對 15 至65 歲的成人進行。PIAAC預計至少每十年進行一次。在第一階段(2011-17年),共有39個國家參加了PIAAC。PIAAC的第二週期將於2022年開始,計畫有31個國家參加前期作業(OECD, 2023)。

 

PIAAC的評估內容為三種一般認知技能方面的熟練程度,包含識字(literacy)、算術(numeracy)、以及在科技豐富的環境中解決問題(problem solving in technology-rich environments),理念可參考圖1。詳細的測驗內容可在相關網站得到範例。這些技能是個人有效參與勞動力市場、教育和培訓以及社會和公民生活的能力的關鍵決定因素。例如,識字率越高,工資越高,志願者活動參與程度越高,社會信任度越高,就業能力越好,健康情況越好(OECD, 2013)。


圖1

數位環境下的PIAAC測驗

Note. From EDUCATION & SKILLS ONLINE ASSESSMENT, by European Commission. (https://www.oecd.org/skills/ESonline-assessment/).


二、AI的發展以及與在PIAAC測驗的表現

為了因應資訊科技對於教育及就業的影響,OECD(2023)年出版了《Is Education Losing the Race with Technology?AI's Progress in Maths and Reading》報告書,其中介紹了PIAAC的進展結果,並且召集專家檢視使用AI在PIAAC測驗的作答反應,判斷其進展程度,本文摘取其中重要的相關訊息。

 

(一)關於人類識字和算術技能的表現

研究中指出了在19個OECD國家和經濟體中均值,結果顯示,熟練程度得分在1級和1級以下的受訪者約佔(15-17%),4級和5級的受訪者約佔13%,超過三分之二的成年人的識字能力(71%)達到2級或3級。

 

(二)專家對人工智慧是否可以進行PIAAC測試的判斷的方法。2016年,OECD要求11位計算機專家對人工智慧解決PIAAC識字和算術測試問題的能力進行評分。在 2021 年的後續評估中,11 位專家在線上調查中評估了人工智慧在識字和算術方面的應用,並在 4 小時的研討會上討論結果。他們遵循了與2016年類似的評級說明,專家們都被問及他們對人工智慧技術執行任務的信心,範圍從0%(確信人工智慧無法解決問題)到100%(確信人工智慧可以解決問題)。

 

根據大多數專家的說法,人工智慧可以解決大多數最簡單的問題,如在短文本中查找資訊和識別基本詞彙。根據同時參與兩波調查的6位專家意見,2016年,根據他們的評級估計,人工智慧素養表現為2級為63%,3級為33%,4級及以上為22%。2021 年,這些 AI 評級分別為 93%、76% 和 78%。總體而言,人工智慧在整個識字測試中的表現提高了 37%(如圖2)。其他專家表示,人工智慧有望解決 80-83% 的識字問題。相比之下,人工智慧仍然在處理需要邏輯推理和常識的語言任務,及需要評估和反思文本的PIAAC問題的專家評分較低。

 

根據資訊專家的說法,人工智慧在識字方面的表現超出了PIAAC的熟練程度3級。大約 27% 的工人每天在熟練程度的 3 級使用識字。另有32%的人每天執行識字任務,識字能力低於3級。總而言之,人工智慧可能會影響59%的工作力的識字相關任務。


圖2

AI 識字測驗結果(依據兩波皆參加的專家意見)

Note. From Is Education Losing the Race with Technology?: AI's Progress in Maths and Reading (pp. 80), by OECD, 2023, OECD Publishing (https://doi.org/10.1787/73105f99-en).


三、對於未來終身教育的因應策略

OECD的科學家主導了後續的相關研究,如Lane等(2023)研究調查了5334名工人和2053家企業在製造業和金融業中對人工智能在工作場所中實施的看法。大多數持正面態度,認為AI有利於提高生產力和改善工作條件。但工人也擔心AI可能威脅工作穩定性和薪酬。同時受訪者也指出,目前成本和技能缺乏是AI採用的主要障礙,而非政府法規。

Lane等(2023)依據結果提出數點關於未來發展的建議:

 

(一)對國際職業技術教育與培訓領導層的建議。

政府應制定AI政策指南和協定,將職業技術教育與培訓學院納入國家AI計劃和戰略。

 

(二)對區域和國家治理的建議。

國家同時需進行現有政策的審查和更新,優先確保AI政策的執行符合道德規範。制定的AI政策應平衡社會和經濟需求,以人為本。

 

(三)對職業技術教育與培訓機構的建議

大學和職業培訓機構應將AI概念和原則融入核心課程內容,培養學員對AI的理解和應用能力。利用開放式在線課程等開放教育資源,為教職員工和學員提供AI教育培訓。


2024年OECD持續發布報告《在工作場域中使用AI:機會、風險和政策回應》提到的政策回應,同樣強調AI促進可持續發展和人類福祉的目標、強調運用人工智慧行為者,應在整個人工智慧系統生命週期中尊重法治、人權和民主價值觀。

 

 

參考資料


Lane, M., Williams M., & Broecke S. (2023). "The impact of AI on the workplace: Main findings from the OECD AI surveys of employers and workers", OECD Social, Employment and Migration Working Papers, No. 288, OECD Publishing, Paris, https://doi.org/10.1787/ea0a0fe1-en.

 


OECD (2013). OECD Skills Outlook 2013: First Results from the Survey of Adult Skills, OECD Publishing, Paris, https://doi.org/10.1787/9789264204256-en.

 


OECD (2023). Is Education Losing the Race with Technology?: AI's Progress in Maths and Reading, Educational Research and Innovation, OECD Publishing, Paris, https://doi.org/10.1787/73105f99-en.


 

OECD (2024). "Using AI in the workplace: Opportunities, risks and policy responses", OECD Artificial Intelligence Papers, No. 11, OECD Publishing, Paris, https://doi.org/10.1787/73d417f9-en.




 

OECD (2024). About Education & Skills Online, OECD https://www.oecd.org/skills/ESonline-assessment/abouteducationskillsonline/


 

 

若需引用此文章內容,請使用下列APA 7格式:

阮孝齊(2024年5月15日)。AI是否能取代人力?國際評比試題的評估及因應。教育新知國際串聯。https://www.gel-net.com/post/202405-02

留言


其他活動

bottom of page