作者：黃于庭
生成式人工智慧與大型語言模型在近年迅速發展，對於數位資訊環境帶來了新的可能性與資訊行為典範轉移的希望。其中最為大眾所知的生成式人工智慧聊天機器人為Google Gemini、Microsoft Bing Copilot和ChatGPT。以下就Gemini、Copilot和ChatGPT三種生成式人工智慧聊天機器人簡單介紹：
| 生成式人工智慧聊天機器人 | 簡介 |
|
Gemini |
Gemini為DeepMind 和Google Research合作開發的成果，Gemini模型是多模態的，可以處理文字、圖像、聲音、影片和程式碼，透過大量資料處理後，利用問題問答與文字產出等神經網絡方式（neural network）輸出結果（Arsal et al., 2024）。 |
|
Copilot |
Copilot為Microsoft研發的生成式人工智慧聊天機器人，亦可透過對話的方式，精心設計各項回應，包含文字、圖片或程式碼（Arsal et al., 2024）。 |
|
ChatGPT |
為OpenAI開發的生成式人工智慧聊天機器人，主要建立於大型語言模型（Large Language Models, LLMs）上，2024年2月後ChatGPT加入「記憶」（memory）這項進階功能，使對話具有延續性，也增加了趣味（Arsal et al., 2024）。 |
以下為使用三種生成式人工智慧聊天機器人搜尋教育類期刊文獻的評測：
問題一、請幫我找三篇以「education」為主題的期刊文獻，希望是近十年出版的，被引用次數越高愈好，我需要寫一份報告，謝謝。
回答一：
|
生成式人工智慧 聊天機器人 |
提供文獻說明 |
|
Gemini |
1.《The Power of Formative Assessment: Research and Practice》，經查此篇應為電子書但副標題錯誤，電子書書名為《The Power of Formative Assessment》，作者應為Box, Cathy, and Cathy Box.而非Gemini所顯示的Paul Black, Dylan Wiliam；且引用次數僅有4次，應非高被引文獻，僅有摘要部分較具有參考價值。 2.《Digital Literacy and Education in the 21st Century: Developing Skills for the Future》，查無此文獻。 3.《The Impact of Socioeconomic Status on Educational Attainment and Equity》，查無此文獻。 |
|
Copilot |
1. Ryan & Deci (2000) — Intrinsic and Extrinsic Motivations: Classic Definitions and New Directions. 經查確有此文獻，於Scopus查詢被引用次數為10,780次，顯示為前1%引用次數之文獻，且領域加權影響指數（Field Weighted Citation Impact, FWCI）為13.18，FWCI值大於1就表示被引程度高於平均水準，故此文獻確為高被引文獻。且Copilot提供的刊名資訊、重點節錄皆正確。 2. Pintrich & Groot (1990) — Motivational and Self-Regulated Learning Components of Classroom Academic Performance. 經查確有此文獻，於Scopus查詢被引用次數為4,914次，引用次數也相對較高，且Copilot提供的刊名資訊、重點節錄皆正確。 3. Chung Kwan Lo (2023) — What Is the Impact of ChatGPT on Education? A Rapid Review of the Literature. 經查確有此文獻，因Scopus未收錄該篇文獻，由Google Scholar查詢後發現，被引用次數為2,009次。 |
|
ChatGPT |
1. Romero & Ventura (2024)：Educational data mining and learning analytics: An updated survey. 經查確有此文獻，作者名正確，但出版年錯誤，出版年應為2020年，重點內容正確，於Scopus查詢被引用次數為641次，顯示為前1%引用次數之文獻，且領域加權影響指數為35.39，故此文獻確為高被引文獻。 2. Tzimas & Demetriadis (2024): Impact of Learning Analytics Guidance on Student Self Regulated Learning Skills, Performance, and Satisfaction. 經查確有此文獻，作者名、出版年與重點內容皆正確，於Scopus查詢被引用次數為15次，顯示為前2%引用次數之文獻，且領域加權影響指數為6.91，故此文獻確為高被引文獻。 3. Deming et al. (2015): Can Online Learning Bend the Higher Education Cost Curve? 經查確有此文獻，作者名、出版年與重點內容皆正確，於Scopus查詢被引用次數為139次，顯示為前9%引用次數之文獻，且領域加權影響指數為2.73，故此文獻確為高被引文獻。 |
問題二、可否產出APA書目引用格式？
回答二、
|
生成式人工智慧 聊天機器人 |
回覆說明 |
|
Gemini |
可提供精確的APA引用格式，包含了文中引用格式（In-Text Citation）和文章結尾的參考文獻（Reference List）格式。 |
|
Copilot |
提供三種文獻的正確APA第七版引用格式，doi網址則為前兩種期刊文獻的網址正確，僅有第三種的期刊文獻網址錯誤。 |
|
ChatGPT |
提供看似正確的APA第七版引用格式，但查詢後發現第一篇文獻的出版年與doi皆錯誤；第二篇文獻doi錯誤；第三篇文獻完全正確。 |
問題三、如果我已經寫好文章大綱了，請問可否幫我改寫？謝謝。
回答三、
|
生成式人工智慧 聊天機器人 |
回覆說明 |
|
Gemini |
可改寫五個章節的大綱，包含：「第一章為引言、第二章為形成性評量：教學與學習的動態引擎（Formative Assessment: A Dynamic Engine for Teaching and Learning）、第三章數位素養：21世紀教育的核心能力（Digital Literacy: A Core Competency for 21st-Century Education）、第四章為社會經濟地位對教育成就與公平的影響（The Impact of Socioeconomic Status on Educational Attainment and Equity）、第五章為結論與展望」（google，2025）。 |
|
Copilot |
改寫報告標題為：「教育中的學習動機與人工智慧：理論基礎與現代應用之探討」，以及改寫六個章節的大綱，包含：「第一章為前言、第二章為學習動機的理論基礎、第三章為人工智慧在教育中的應用與挑戰 、第四章為整合分析與討論、第五章為結論與建議、第六章為參考文獻」（Microsoft Copilot，2025)。 |
|
ChatGPT |
改寫報告題目為：「科技驅動下的教育變革：從資料分析到線上學習的實證探討」，以及改寫六個章節的大綱，包含第一章緒論、第二章文獻回顧、第三章比較分析、第四章討論、第五章結論與建議、第六章參考文獻（OpenAI，2025）。 |
總結前述測試結果如下：
一、 Gemini
．缺點：提供的文獻錯誤率高，三篇文獻其中只有一篇是真正的文獻，該文獻為電子書，也非指令所設定的高被引文獻。
．優點：輸出的報告大綱尚稱完整，且詢問撰寫生成式人工智慧聊天機器人的引文格式回覆最為完整，包含內文撰寫方式與參考書目撰寫方式。
二、 Copilot
．缺點：撰寫生成式人工智慧聊天機器人的引文格式回復較簡略，判斷「近十年」這個指令，有計算年代錯誤的問題。
．優點：提供的文獻品質偏高，引文數量最多，領域加權影響指數亦偏高。
三、 ChatGPT
．缺點： 撰寫生成式人工智慧聊天機器人的引文格式回復較簡略。
．優點： 判斷「近十年」這個指令，年代計算完全正確，回復的文獻品質最高，引文數量最多，領域加權影響指數亦偏高。
*本文測試生程式AI的時間為2025年11月，因生程式AI技術持續快速演進，相關內容敬供讀者參考，建議讀者依據自身需求進一步探索最新發展，感謝您的閱讀。
參考資料：
- Arsal, M., Saleem, B., Jalil, S., Ali, M., Zahra, M., Rehman, A. U., & Muhammad, Z.(2024). Emerging cybersecurity and privacy threats of chatgpt, gemini, and copilot: Current trends, challenges, and future directions. Preprints, October.
- Gemini（Google開發）。(2025年7月10日存取)。[Gemini 2.5 Flash]。人工智慧生成內容。
- Microsoft Copilot. (2025). 教育中的學習動機與人工智慧：理論基礎與現代應用之探討 [AI生成內容]. Personal communication.
- OpenAI. (2025). 科技驅動下的教育變革：從資料分析到線上學習的實證探討（報告大綱） [Large language model response]. ChatGPT. https://chat.openai.com/