對於大型國際評比，國內較多關注在經濟合作暨發展組織（Organisation for Economic Cooperation and Development, OECD）發展之13-15歲學生參加的《國際學生能力評量》。然而國際評比和國家產業發展，以及與國家發展的連結，也受到國際社會的重視。本文從國際成人技能評量計畫（Programme for the International Assessment of Adult Competencies, PIAAC）測驗的AI應用，談新近趨勢在AI對於教育的因應作為。
一、PIAAC測驗簡介
PIAAC是根據從1994年至1998年進行的國際成人素養調查（International Adult Literacy Survey, IALS）獲得的知識和經驗制定的。OECD 於 2013 年開始實施三輪調查，針對 15 至65 歲的成人進行。PIAAC預計至少每十年進行一次。在第一階段（2011-17年），共有39個國家參加了PIAAC。PIAAC的第二週期將於2022年開始，計畫有31個國家參加前期作業（OECD, 2023）。
PIAAC的評估內容為三種一般認知技能方面的熟練程度，包含識字（literacy）、算術（numeracy）、以及在科技豐富的環境中解決問題（problem solving in technology-rich environments），理念可參考圖1。詳細的測驗內容可在相關網站得到範例。這些技能是個人有效參與勞動力市場、教育和培訓以及社會和公民生活的能力的關鍵決定因素。例如，識字率越高，工資越高，志願者活動參與程度越高，社會信任度越高，就業能力越好，健康情況越好（OECD, 2013）。
圖1
數位環境下的PIAAC測驗
Note. From EDUCATION & SKILLS ONLINE ASSESSMENT, by European Commission. (https://www.oecd.org/skills/ESonline-assessment/).
二、AI的發展以及與在PIAAC測驗的表現
為了因應資訊科技對於教育及就業的影響，OECD（2023）年出版了《Is Education Losing the Race with Technology？AI's Progress in Maths and Reading》報告書，其中介紹了PIAAC的進展結果，並且召集專家檢視使用AI在PIAAC測驗的作答反應，判斷其進展程度，本文摘取其中重要的相關訊息。
（一）關於人類識字和算術技能的表現
研究中指出了在19個OECD國家和經濟體中均值，結果顯示，熟練程度得分在1級和1級以下的受訪者約佔（15-17%），4級和5級的受訪者約佔13%，超過三分之二的成年人的識字能力（71%）達到2級或3級。
（二）專家對人工智慧是否可以進行PIAAC測試的判斷的方法。2016年，OECD要求11位計算機專家對人工智慧解決PIAAC識字和算術測試問題的能力進行評分。在 2021 年的後續評估中，11 位專家在線上調查中評估了人工智慧在識字和算術方面的應用，並在 4 小時的研討會上討論結果。他們遵循了與2016年類似的評級說明，專家們都被問及他們對人工智慧技術執行任務的信心，範圍從0%（確信人工智慧無法解決問題）到100%（確信人工智慧可以解決問題）。
根據大多數專家的說法，人工智慧可以解決大多數最簡單的問題，如在短文本中查找資訊和識別基本詞彙。根據同時參與兩波調查的6位專家意見，2016年，根據他們的評級估計，人工智慧素養表現為2級為63%，3級為33%，4級及以上為22%。2021 年，這些 AI 評級分別為 93%、76% 和 78%。總體而言，人工智慧在整個識字測試中的表現提高了 37%（如圖2）。其他專家表示，人工智慧有望解決 80-83% 的識字問題。相比之下，人工智慧仍然在處理需要邏輯推理和常識的語言任務，及需要評估和反思文本的PIAAC問題的專家評分較低。
根據資訊專家的說法，人工智慧在識字方面的表現超出了PIAAC的熟練程度3級。大約 27% 的工人每天在熟練程度的 3 級使用識字。另有32%的人每天執行識字任務，識字能力低於3級。總而言之，人工智慧可能會影響59%的工作力的識字相關任務。
圖2
AI 識字測驗結果（依據兩波皆參加的專家意見）
Note. From Is Education Losing the Race with Technology?: AI's Progress in Maths and Reading (pp. 80), by OECD, 2023, OECD Publishing (https://doi.org/10.1787/73105f99-en).
三、對於未來終身教育的因應策略
OECD的科學家主導了後續的相關研究，如Lane等（2023）研究調查了5334名工人和2053家企業在製造業和金融業中對人工智能在工作場所中實施的看法。大多數持正面態度，認為AI有利於提高生產力和改善工作條件。但工人也擔心AI可能威脅工作穩定性和薪酬。同時受訪者也指出，目前成本和技能缺乏是AI採用的主要障礙，而非政府法規。
Lane等（2023）依據結果提出數點關於未來發展的建議：
（一）對國際職業技術教育與培訓領導層的建議。
政府應制定AI政策指南和協定，將職業技術教育與培訓學院納入國家AI計劃和戰略。
（二）對區域和國家治理的建議。
國家同時需進行現有政策的審查和更新，優先確保AI政策的執行符合道德規範。制定的AI政策應平衡社會和經濟需求，以人為本。
（三）對職業技術教育與培訓機構的建議
大學和職業培訓機構應將AI概念和原則融入核心課程內容，培養學員對AI的理解和應用能力。利用開放式在線課程等開放教育資源，為教職員工和學員提供AI教育培訓。
2024年OECD持續發布報告《在工作場域中使用AI：機會、風險和政策回應》提到的政策回應，同樣強調AI促進可持續發展和人類福祉的目標、強調運用人工智慧行為者，應在整個人工智慧系統生命週期中尊重法治、人權和民主價值觀。
參考資料
Lane, M., Williams M., & Broecke S. (2023). "The impact of AI on the workplace: Main findings from the OECD AI surveys of employers and workers", OECD Social, Employment and Migration Working Papers, No. 288, OECD Publishing, Paris, https://doi.org/10.1787/ea0a0fe1-en.
OECD (2013). OECD Skills Outlook 2013: First Results from the Survey of Adult Skills, OECD Publishing, Paris, https://doi.org/10.1787/9789264204256-en.
OECD (2023). Is Education Losing the Race with Technology?: AI's Progress in Maths and Reading, Educational Research and Innovation, OECD Publishing, Paris, https://doi.org/10.1787/73105f99-en.
OECD (2024). "Using AI in the workplace: Opportunities, risks and policy responses", OECD Artificial Intelligence Papers, No. 11, OECD Publishing, Paris, https://doi.org/10.1787/73d417f9-en.
OECD (2024). About Education & Skills Online, OECD https://www.oecd.org/skills/ESonline-assessment/abouteducationskillsonline/
若需引用此文章內容，請使用下列APA 7格式：
阮孝齊（2024年5月15日）。AI是否能取代人力？國際評比試題的評估及因應。教育新知國際串聯。https://www.gel-net.com/post/202405-02
