碩論文獻分析(資料科學視角)2026-09-14
- 論文數:4(主題一 2、主題二 2)
- 分析:MoA(東吳資料科學系碩論規劃視角)
主題一:AI 代理人影響
整體結論
從資科視角看,今日主題一文獻以系統模擬與生產力命題為主,方法論上偏重工程評估而非使用者層因果推論。六個影響維度中,僅工作效率有明確研究命題,其餘維度需自行設計混合方法研究補足。
維度綜述
#### 生活協助
系統模擬顯示協作任務可行,但缺使用者實驗與隱私—福祉連結分析。
#### 工作效率
生產力是核心 DV 候選,但須 RCT 或準實驗+客觀績效指標才能支撐碩論因果主張。
#### 健康影響
無直接量測;可納入壓力/睡眠/福祉量表作為中介或調節變項。
#### 成癮性
兩篇皆未量測;需行為日誌或自我報告使用量表。
#### 焦慮感
安全風險可作 IV,焦慮量表作 DV 的實驗設計尚未出現。
#### 成癮後缺乏使用之影響
縱向停用設計完全缺失,是碩論可切入的明顯缺口。
資料科學綜述
#### 方法論地圖
主題一今日以「系統模擬+安全評估」與「職場生產力調查/評論」為主,缺少 RCT、縱向追蹤與多變項心理量表並行的混合方法設計。
#### 資料蒐集策略
優先蒐集可客觀量化的工作任務績效(時間、正確率)+標準化心理量表;需 IRB、知情同意,使用日誌須去識別化;代理人對話內容不得含 PII。
#### 師資方向對接
呂明頴(行為分析、資料探勘)適合績效+行為建模;蘇明祥(對話系統、情緒感知)適合代理人互動與焦慮機制;鄭江宇(UX 實驗)適合安全事件對信任的影响實驗。
#### 可執行研究設計
- 準實驗:招募 60–80 名知識工作者,分「Hermes 代理人輔助組/一般工具組」,以任務完成時間、錯誤率為 DV,同步量測問題性使用與焦慮(前後測+2 週追蹤)。
- 縱向日誌研究:30 天 ChatGPT/Hermes 使用日誌+每日簡短量表,以時間序列或混合效應模型分析停用週末的 withdrawal 徵象。
- 安全事件實驗:在 Terrarium 式情境中操弄隱私外洩事件,量測使用者信任下降與後續使用意願(適合小樣本 UX 實驗)。
本日論文
1. Terrarium: Revisiting the Blackboard for Multi-Agent Safety, Privacy, and Security Studies
- 領域:AI 代理人系統
- 作者:Mason Nakamura, Abhinav Kumar, Saaduddin Mahmud, Sahar Abdelnabi, S. Zilberstein, Eugene Bagdasarian
- 年份:2025
- 連結:https://www.semanticscholar.org/paper/450f3603e3a1f679e79f72a9f5b16214a0eb84ba
研究提出 Terrarium 多代理人測試框架,以黑板架構模擬會議排程等協作任務,並展示錯置、惡意代理人、通訊遭入侵與資料投毒等攻擊。屬系統安全與隱私研究平台,非使用者身心影響研究。
#### 維度分析
- 生活協助:多代理人可協作處理會議排程等繁瑣任務,但攻擊或錯置可能損害偏好與私人資料。
- 工作效率:框架顯示任務自動化技術可能性,未提供工時節省或實際工作績效效果量。
- 健康影響:未直接量測身心健康;隱私或安全事故只能視為潛在間接壓力來源。
- 成癮性:未研究使用頻率、強制性使用或成癮量表。
- 焦慮感:未量測使用者焦慮;安全風險不能直接等同焦慮結果。
- 成癮後缺乏使用之影響:未研究停止使用代理人後的戒斷、功能退化或心理依賴。
與 Hermes/OpenClaw/Grok 關聯: 可作為 Hermes Agent、OpenClaw 等工具型代理人之多代理協作與安全測試的間接證據;未直接實測 Hermes Agent、OpenClaw 或 Grok Bot。
#### 資料科學視角
- 研究方法:系統建置+情境模擬實驗;以可配置黑板架構注入四類攻擊向量,屬工程導向安全評估而非使用者 RCT。
- 資料與樣本:三種協作情境與代表性攻擊案例;無真人樣本、無問卷或行為日誌,資料為模擬互動與攻擊事件。
- 評估指標:攻擊成功率、協作任務完成度、隱私外洩等系統層指標;未含使用者福祉、成癮或焦慮量表。
- 碩論可借鑑:可借鑑 Terrarium 思路,以 Hermes/OpenClaw 多步任務建立「安全事件 × 使用者信任/焦慮」的對照實驗平台,但須補充真人樣本與心理量表。
2. Using Generative AI to Increase Workplace Productivity
- 領域:生產力與工作效能
- 作者:Arjita Jain, Anjali M. Kulkarni, N. M. Halgare, K. Kakade, S.M. Patil, J. Brahmane
- 年份:2025
- 連結:https://www.semanticscholar.org/paper/f58ed8e68bf3a0d63a4a4539c49c11a6bfcbdfb3
論文主題聚焦生成式 AI 與職場生產力,但當日可取得語料未含摘要或研究數據,僅能確認研究範圍,不能陳述樣本、方法、效果量或因果結論。
#### 維度分析
- 生活協助:未取得日常生活協助的直接證據。
- 工作效率:研究主題直接涉及職場生產力,但可取得資料不足以確認效率提升幅度、適用任務或因果性。
- 健康影響:未取得健康結果資料,不能判斷效率提升是否伴隨壓力或福祉變化。
- 成癮性:未取得問題性使用或成癮評估資料。
- 焦慮感:未取得焦慮量表或相關結果。
- 成癮後缺乏使用之影響:未取得停用後功能依賴或戒斷結果。
與 Hermes/OpenClaw/Grok 關聯: 可作為 Hermes Agent、OpenClaw、Grok Bot 工作用途的背景文獻,但屬一般生成式 AI,且當日語料不足以外推至特定代理人產品。
#### 資料科學視角
- 研究方法:語料未載明;依期刊性質推測可能為調查或個案研究,但無法核實是否含 RCT 或準實驗設計。
- 資料與樣本:無可取得樣本數、產業別或任務類型;資料細節缺失,無法評估外部效度。
- 評估指標:預期應含生產力指標(工時、產出、錯誤率等),但當日語料無法引用任何數值。
- 碩論可借鑑:提醒碩論設計須優先鎖定「可量測的客觀績效指標+對照組」;可設計 Hermes 使用者前後測,以任務完成時間與錯誤率為 DV,並同步蒐集問題性使用量表。
#### 研究缺口
- 缺 RCT 或準實驗連結代理人使用與客觀績效、心理量表的因果設計。
- 缺縱向停用/withdrawal 追蹤資料。
- 缺針對 Hermes/OpenClaw/Grok 的產品層實證。
主題二:聊天軟體成癮與生活強制性
整體結論
主題二方法論以心理計量(量表、回顧)與專家評分實驗並存:前者適合建構問題性使用模型,後者適合評估答案品質但無法直接推論一般使用者行為。資科碩論可整合「量表+對照實驗+多模型比較」三合一設計。
維度綜述
#### 使用多少會成癮
應以量表界定問題性使用,不能以固定時數代替;需 CFA 驗證與切分點分析。
#### 資料可信度與信任度
平均評分高於中點不等於可無條件信任;須分題型、分模型做信任校準分析。
#### 查覺 AI 錯誤答案能力
專家 IRR 低提示需一般使用者查錯實驗,並以混淆矩陣或 AUC 量化查錯能力。
#### 對有害內容抗拒度
CBT/數位素養為介入方向,但需行為實驗量測拒絕有害建議的實際選擇。
資料科學綜述
#### 方法論地圖
今日文獻涵蓋敘事回顧(量表、理論、EEG)與專家評分實驗(Likert、IRR);缺一般使用者 RCT、多模型橫向比較,以及使用量—信任—查錯的聯合模型。
#### 資料蒐集策略
大學生樣本可透過校內招募;醫療類刺激需倫審並避免真實個案;對話截圖去識別化;多模型 API 呼叫需記錄 prompt、回答、模型版本以確保可複製。
#### 師資方向對接
丁德天(精神流行病學、物質濫用、青少年健康)適合問題性使用與縱向問卷;鄭江宇(UX 實驗)適合查錯與有害內容抗拒實驗;蘇明祥(對話系統、NLP)適合多模型回答比較與文本特徵分析。
#### 可執行研究設計
- 問卷+SEM:台灣大學生 n≈300,PCUS 等量表+信任/數位素養量表,以 ChatGPT 使用強度為 IV,問題性使用為 DV,檢驗 Grok 使用者子群差異。
- 對照實驗:一般使用者 vs 資科背景各 40 人,呈現含故意錯誤的 ChatGPT/Grok 醫療或生活建議,量測查錯率、信任調整與有害建議採納(χ² 或 logistic regression)。
- 縱向混合方法:14 天使用日誌+每週量表,以混合效應模型分析使用峰值與功能受損的時間滞后關係。
本日論文
1. Problematic ChatGPT use: Manifestations, etiologies, and evaluation
- 領域:聊天心理與強制性
- 作者:Hui-Yuan Liao, Chih-Hung Ko, Cheng-Fang Yen
- 年份:2026
- 連結:https://www.semanticscholar.org/paper/01bbb1fca76600cc466f373d8bfece7b7e8e458f
敘事性回顧整合問題性 ChatGPT 使用的表現、病因、評估工具與初步腦電證據,指出與憂鬱、壓力、自我控制受損及功能困難相關。現有量表提供初步框架,但仍需跨文化與心理計量驗證。
#### 維度分析
- 使用多少會成癮:回顧確認可用問題性使用、依賴與功能受損量表評估,但沒有提出可泛化的每日時數或互動次數門檻。
- 資料可信度與信任度:認知偏誤與直覺處理可能參與依賴形成,但回顧未給出各模型資料可信度或信任比例。
- 查覺 AI 錯誤答案能力:回顧提到認知機制,未直接量測使用者辨識 ChatGPT 事實錯誤的能力。
- 對有害內容抗拒度:提出數位素養、自我調節與認知行為介入方向,但未直接測試使用者拒絕有害內容的行為。
與 ChatGPT/Grok 等關聯: 直接研究 ChatGPT 問題性使用;量表框架可供 Grok、Claude、Gemini 比較,但不能假定不同產品具有相同風險。
#### 資料科學視角
- 研究方法:敘事性文獻回顧;整合心理計量工具開發、理論模型(I-PACE、補償性網路使用、雙系統)與初步 EEG 研究,屬混合證據綜述。
- 資料與樣本:跨台灣、土耳其、中國、韓國、新加坡、美國之实证研究;含年輕成人樣本與多份量表(PCUS、CAIDS、GADS),但各研究樣本異質。
- 評估指標:問題性使用量表得分、憂鬱/壓力/自我控制、功能困難;EEG 功能連結為探索性神經指標,信效度仍待驗證。
- 碩論可借鑑:可直接採用或改編 PCUS 等量表,在台灣大學生樣本做 CFA/SEM,並以 ChatGPT vs Grok 分組比較問題性使用與信任校準,適合量化+問卷型碩論。
2. Assessing Ability for ChatGPT to Answer Total Knee Arthroplasty-Related Questions.
- 領域:錯誤查覺與 AI 素養
- 作者:Matthew L. Magruder, Ariel N. Rodriguez, C. Wong, O. Erez, N. Piuzzi, Giles R. Scuderi, J. Slover, Jason H. Oh, Ran Schwarzkopf, Antonia F. Chen, Richard Iorio, Stuart B Goodman, M. Mont
- 年份:2024
- 連結:https://www.semanticscholar.org/paper/acf3bef0c90354b284e53f842438389faa018573
將十五項 AAOS 全膝關節置換臨床指引改寫為問題,由十一位關節重建專科醫師以 1–5 分量表評分 ChatGPT 回答。各特徵平均高於中點,但 IRR 僅 0.33,顯示可靠性變異大。
#### 維度分析
- 使用多少會成癮:未研究使用頻率、依賴或成癮門檻。
- 資料可信度與信任度:專科醫師評分顯示回答整體高於中點但可靠性有變異,支持依題型與證據校準信任,而非全面採信。
- 查覺 AI 錯誤答案能力:由專科醫師而非一般使用者評估,且評分者一致性偏低;不能據此推論一般人能查覺錯誤。
- 對有害內容抗拒度:未測量模型拒答或使用者抗拒有害醫療建議;醫療情境的變異可靠性凸顯外部查證必要。
與 ChatGPT/Grok 等關聯: 直接評估 ChatGPT 醫療回答;專家審查方法可延伸比較 Grok、Claude、Gemini,但結果不能直接套用其他模型或一般使用者。
#### 資料科學視角
- 研究方法:指引轉問題+線上問卷;11 名專科醫師對 ChatGPT 回答進行六維度 Likert 評分(相關性、準確性、清晰度、完整性、循證、一致性)。
- 資料與樣本:15 個 AAOS 臨床指引問題、3 個子題類別(風險因子、植入/術中、疼痛/功能);樣本為專家而非一般使用者。
- 評估指標:六維度 1–5 分均值與標準差(如相關性 4.43±0.77、一致性 3.54±1.10);IRR=0.33(低),子組別比較。
- 碩論可借鑑:可改編為「一般使用者 vs 專家」雙組錯誤查覺實驗:同一批 ChatGPT/Grok 回答,量測查錯率、過度信任與有害建議採納意願,適合 UX+統計檢定設計。
#### 研究缺口
- 缺跨模型、跨文化且經 CFA 驗證的問題性聊天 AI 量表(台灣樣本)。
- 缺一般使用者查錯能力與信任校準的實驗證據。
- 缺使用量、信任、查錯、有害內容抗拒的四維聯合模型。
三個爭議點
- Terrarium 以系統層攻擊成功率評估安全,問題性 ChatGPT 回顧卻以心理量表與 EEG 評估依賴——兩套方法論難以直接比較「便利 vs 成癮」因果,碩論若合併兩主題須明確界定層級(系統/個人)與 DV。
- 職場生產力論文命題與 PCUS 量表可能同時成立,但缺同一樣本同時量測績效、問題性使用與停用後 withdrawal 的縱向設計,方法論上無法反駁或確認「效率換成癮」假說。
- TKA 研究中專家 IRR 僅 0.33 卻仍報告「高於中點」——平均數掩蓋評分者分歧,對碩論的啟示是:信任與查錯研究不能只看均值,須報告一致性與個體差異,否則高估 AI 答案品質。