5/20~5/24 任務與心得  柒零

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增2人，目前共完成25人 

→收案進行中人數：1人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：共完成9人，有1人尚未完成
• 玉里實習生活動帶領檔案與影片整理：91/109(補齊因為格式問題沒出現評分的成績)
• ChatGPT逐字稿評估：72/90
• GPT設計介紹：9/10

心得與困難

1. ChatGPT逐字稿評估：同上週任務，唯一不同的是這次任務是要在同一個對話裡面，成功產出3次評估結果(上次每個評估都是輸入到不同對話)。因為是同一個對話裡面，一旦後面有出現錯誤，有機會要3個都重測，原因見後面。最麻煩的應該就是出現【違反使用政策】，因為就算評估結果符合格式，也無法下載連結，而且某些對話稿在同一對話的評估時容易遇到，之後再詢問玉正的要如何處理這種狀況，也蠻好奇是怎麼判斷違反使用策略(該不會是用ChatGPT在抓關鍵字)。雖然評估還未完成，但可以觀察到有大約半數的治療師的3份對話稿中，會有2份對話稿的評分完全相同，畢竟在相同對話中的重複性就是比不同對話高。但容易有一個問題，如果有出現錯誤的評估結果時，後面也容易都是出現一樣的結果，所以玉正後來補充，可以再重新開一個對話再進行評估，並做紀錄。
2. IRB文件準備：因為玉里審查IRB的關係，根據沛綺指示，週五帶著指定的收案同意書去總區一趟，用那邊的設備掃描成電子檔再傳給她，同時因為李主任那邊需要紙本檔，加上剛好主任那時有事情，所以我再去印副本，士傑老師與認知測驗分別各印3份，共6份。中途一邊跟沛綺連絡一邊操作，影印機還不小心印到沒紙。只能說這種文件準備十分耗時費工。
3. GPT設計介紹：一開始看到時沒多想，起頭開始做後，才忽然想到讀者是誰，畢竟平時周四下午都有交流，所以才在後來詢問老師相關問題，並知道原來是跟有使用ChatGPT經驗的人分享。
4. 玉里一日遊：大約每半年一次，玉里醫院會帶領適合的學員一日遊，這次剛好在這周五。跟老師聊天知道這次會搭遊覽車去台東市的大賣場，順路經過台9線的一些景點。而老師與學員的人數比是1：5、6左右，雖然路上天氣不佳，但一日遊還是順利完成。

 

5/13~5/17 任務與心得  69周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增2人，目前共完成23人 

→收案進行中人數：1人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：完成6人
• 對於ChatGPT逐字稿評估之測驗：90/90

心得與困難

1. ChatGPT逐字稿評估：測驗介紹：每個治療師的逐字稿有3份，30個治療師共90份。我任務是將word放入ChatGPT，輸入「這是xxx治療師，請評分」，並記錄回答結果，測驗過程。大約在測驗進度至三分之一時，ChatGPT改版變成GPT-4o，詢問經玉正確認後繼續測驗，直到最後十份時玉正通知我，要改成測到每一份逐字稿的測驗結果都要符合預期，並記錄重測的次數(之前是如果檔案不符合預期，紀錄即可)，於是再把前面有狀況的檔案重測一遍。測驗觀察。測驗項目共9項，每項5分，總分45分，90份檔案平均分數為30.5。所有結果都有正確評估到9個評估項目，沒有出現增加、減少項目的情況；在ChatGPT改版前，至少6成以上的分數顯示的格式錯誤，變成GPT-4o後，第一天測也是5成左右分數顯示不正確，但之後測有問題的分數顯示就低於2成；關於表現最好或最差的3個項目與評分表結果出現矛盾，總共遇不到5次，不過需要逐條比對，才發現有些中間分數的項目被丟到最好或最差的3個項目中。
2. GPT-4o：雖然只是在逐字稿評估時使用，但可以明顯感受到改版後的運行速度比改版前快，而且排除第一天的狀況，未符合標準的輸出結果也低於2成，如有問題，通常只要再跑一次就能輸出正確的結果，最多3次，比起舊版ChatGPT節省時間，之後有再多嘗試其功能
3. 新任務：可嘗試將思覺失調個案與治療師的對話放入GPT，使其學習模仿，或許可以節省範例的字數，不過我揣測如何使ChatGPT在參考許多對話後，能完整帶入測驗中的標準病人，會是一種挑戰

 

5/6~5/10 任務與心得  六十八周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增2人，目前共完成21人 

→收案進行中人數：1人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：完成6人
• 介紹職能治療GPT設計：修改大綱架構，並製作完成精神職能介紹GPT2，等之後回饋再更改
• 協助評估：6/90

心得與困難

1. 新任務：協助玉正測試GKCSAF溝通技巧，將檔案輸入進去讓ChatGPT操作，之後再紀錄其產出的結果是否有達到原本所要求的內容，簡單且繁瑣的任務。不過嘗試操作後發現要吃網速，下周再移到訊號較好的位子繼續操作，預計周五前完成
2. GPT測驗感想：這周做過數個GPT測驗後有一個感想，除了客觀資料外，如何使人覺得標準病人的差異性，而不會覺得這只是換一個診斷的相同標準病人。主要是之前在測小兒與生理時，可以感受到兩者的標準病人對話、個性不太一樣(當然一部分是因為小兒的標準病人是家長)。但之前測驗精神第一個設計的標準病人(GPT1)、第二個設計的標準病人(GPT2)時，往往會出現幾乎相同的對話過程，除了症狀外區別不大，所以後來將GPT2的對話特色嘗試更鮮明化，這樣可以讓受測者明顯感受到是與兩個不同的標準病人進行測驗
3. 群聚：最近玉里老師通知我部分病房爆發群聚，我好奇問不是之前也說病房有群聚，老師表示上次只是普通感冒，這次是新冠群聚，現在似乎護理人員也有人確診，之後視情況會再做人員出入調整。好在這周受測者都沒確診，不過因為錄影時盡量不戴口罩，所以還是讓他們測驗前先洗手，而我測驗全程也戴著口罩以及跟著洗手
4. 電腦更新：電腦更新後影響一些測驗項目的運行，後來跟沛綺下載更新檔後便無問題

 

4/29~5/3 任務與心得  第67周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增2人，目前共完成19人 

→收案進行中人數：1人

→資料備份：因忘記帶隨身碟，下周補全雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：完成6人
• 介紹職能治療GPT設計：修改大綱架構，並製作另一個職能介紹GPT，進度約80%，修正測驗中出現不事宜的對話
• 協助測驗GPT

心得與困難

1. 介紹職能治療GPT架構：研究我跟瑜函的GPT架構後，或許可分成關於考站，以及標準病人兩部份。前者要定義考站的目的，以及測驗的內容，類似於房屋的牆壁，而標準病人就像屋內家具，經過我們的設計讓整個測驗內容更加豐富。只是做過其他領域的GPT後，發現精神、小兒、生理的標準病人所呈現資料的歧異度高，可能因為在精神待一陣子，所以嘗試小兒領域的GPT時，除了回憶之前實習經驗外，多少產出有種原來小兒需要這些設定 (比如精細東做的發展年齡)的想法，看來還需要再繼續嘗試
2. 測驗安排介紹：目前每周大約可以分成上下午共10個測驗時段，早上時間是從9：00~10：30，因為前面可能病房護理師還沒忙完，進病房內諸多不便，而10：30左右病房就要準備午餐，有時受測者可能是打飯人員，盡量午餐前送回去。而下午時段則是2：30~4：30左右，主要有時2：00病房會分發水果或點心，等他們測完就可以測驗，而下午則是4：30會準備晚餐。另外每個病房每周都會定期去福利社採購，上週聽受測者因為福利社結帳機有問題，不知道之後會怎麼安排。另外醫院不定期會做各科檢查，大部分都是我去找受試者時才知道。此外認知能力較佳的學員會被安排工作，有工作的學員大致可以分成全天班、半天班以及有事任務型：全天班就要詢問輪班日期，有些整天外出，或是每次去找的時候都表示再忙；而半天班的學員通常下午有空，但有些時候，比如工作過累就出現明顯的症狀波動；有事才有任務的類型通常都在病房協助，所以玉里老師也不確定他們認知程度，得實際測驗才能有答案。最後我一周大都能測8個時段，剩下時段可以容錯或是做其他任務，並且因為認知測驗分4個部份，第4部份較短有時可以跟其他部份合併或是同一時段讓兩個受測者前後測。總之就是要看當下的情況去做較好的安排
3. 勞動節：因為跟著玉里老師作息，改成5/3放勞動節，順便出去玩，下周要努力補上進度