National Yang Ming Chiao Tung University
Uedu Main Site
Explore Uedu
Student Console
Register as Member/Login
Research Informed Consent Center
Survey Center
Educational Big Data Challenge
Claim or create a course
Try a Scenario Task
Support & Messages
Uptime Data

UeduGPTs

--

Jupyters

1

Local AI

--

Uedu Code

--

陽明交大 AQI 69 24°C PM2.5 26
AI Reply Desktop Notifications

Show a desktop notification when the AI TA finishes replying

Chat Message Notifications

Notify me when classmates post messages in the forum

Sound notification

Play an alert sound whenever there is a new notification

Unit M6

創造與規範:設計一個知道自己不知道的助手

寫助手設定、用固定測試題檢查、規範書與揭露頁、何時選擇不用 AI
Interaction 30 minute(s)

Learning Objectives

  • 為一個 AI 助手寫出設定:服務對象、可以做與不可以做的事、能力邊界。
  • 用一組固定的測試題檢查助手,特別是它在不知道時是否明確表示不知道;依結果修改後再測。
  • 說明使用規範書與揭露頁的內容,並判斷在哪些情況下選擇不使用 AI。

從使用者變成設計者

前五課,你學的是怎麼使用 AI:知道它怎麼產生回答、查證它的說法、誠實揭露、守住資料邊界、安排分工。這一課換個位置:你來設計一個 AI 助手,給別人用。

設計者要回答的問題和使用者不同:這個助手服務誰?哪些事它可以做、哪些不可以?它不知道答案時,會老實說嗎?一個回答流暢、卻會一本正經地編造答案的助手,比一個會說「我不知道」的助手更危險。所以本課評量助手的重點是:它知不知道自己不知道。

練習一:迷你助手實驗室

為下面的情境寫一份助手設定,按「執行測試」,助手會回答五題固定的測試題。由你判斷每個回答是否恰當,再修改設定、重新測試。完成兩個版本的測試與判斷後計入進度。

登入後使用真實的 AI 模型(每人每 24 小時可測 60 題,五題一輪);未登入時使用預先寫好的示意回答。

想一想:測試助手

1.

測試一個 AI 助手時,最需要檢查的是什麼?

2.

你的助手對「期中考日期」編了一個日期。最好的修改是?

3.

為什麼修改設定之後,要用同一組測試題重新測試?

第 1 次作答

使用規範書與揭露頁

把助手交給別人用之前,要寫兩份文件:

文件 給誰看 要寫什麼
使用規範書 使用者 這個助手服務誰;可以請它做什麼、不可以做什麼;使用它完成作業時要怎麼揭露
揭露頁 使用者與審查者 使用的模型與資料來源;能力邊界與已知的錯誤;設計時哪些決定是人做的、哪些是 AI 建議的;測試的結果

揭露頁要誠實寫出測試中發現的問題,例如「對課程以外的問題,仍可能給出不正確的答案」。把缺點寫清楚,使用者才知道什麼時候要自己查證。

設計者也要回答最後一個問題:什麼情況下,應該選擇不用 AI?

練習二:這時候適合用 AI 嗎?

判斷每個情境適合使用 AI,還是應該選擇不用。全部選好後按「揭曉」。

想一想:設計者的責任

1.

助手的揭露頁,最需要告訴使用者什麼?

2.

為什麼「選擇不用 AI」也是 AI 素養的一部分?

3.

你設計的助手給了同學錯誤的答案,責任在誰?

第 1 次作答

六課走完之後

回顧這條路徑,每一課都在練同一件事的不同面向:

課 你練的動作
M1 理解 知道 AI 產生的是「最像答案的文字」,語氣不等於把握
M2 查證 分辨事實、推論、意見;逐筆查證引用
M3 誠信 依使用程度使用 AI,完整揭露
M4 資料 送出前先問:這份資料是誰的、公開了沒
M5 分工 要學會的能力自己做,核對永遠自己做
M6 創造 設計一個知道自己不知道的助手,並判斷何時不用 AI

把這些動作帶進每一次使用 AI 的時刻,就是 AI 素養。

這一課完成了!
看我的學習進度
你目前沒有登入,學習進度只存在這個瀏覽器。 Login 後,進度會跟著帳號,換電腦也看得到。