5/13~5/17 任務與心得  69周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增2人，目前共完成23人 

→收案進行中人數：1人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：完成6人
• 對於ChatGPT逐字稿評估之測驗：90/90

心得與困難

1. ChatGPT逐字稿評估：測驗介紹：每個治療師的逐字稿有3份，30個治療師共90份。我任務是將word放入ChatGPT，輸入「這是xxx治療師，請評分」，並記錄回答結果，測驗過程。大約在測驗進度至三分之一時，ChatGPT改版變成GPT-4o，詢問經玉正確認後繼續測驗，直到最後十份時玉正通知我，要改成測到每一份逐字稿的測驗結果都要符合預期，並記錄重測的次數(之前是如果檔案不符合預期，紀錄即可)，於是再把前面有狀況的檔案重測一遍。測驗觀察。測驗項目共9項，每項5分，總分45分，90份檔案平均分數為30.5。所有結果都有正確評估到9個評估項目，沒有出現增加、減少項目的情況；在ChatGPT改版前，至少6成以上的分數顯示的格式錯誤，變成GPT-4o後，第一天測也是5成左右分數顯示不正確，但之後測有問題的分數顯示就低於2成；關於表現最好或最差的3個項目與評分表結果出現矛盾，總共遇不到5次，不過需要逐條比對，才發現有些中間分數的項目被丟到最好或最差的3個項目中。
2. GPT-4o：雖然只是在逐字稿評估時使用，但可以明顯感受到改版後的運行速度比改版前快，而且排除第一天的狀況，未符合標準的輸出結果也低於2成，如有問題，通常只要再跑一次就能輸出正確的結果，最多3次，比起舊版ChatGPT節省時間，之後有再多嘗試其功能
3. 新任務：可嘗試將思覺失調個案與治療師的對話放入GPT，使其學習模仿，或許可以節省範例的字數，不過我揣測如何使ChatGPT在參考許多對話後，能完整帶入測驗中的標準病人，會是一種挑戰