8/5~8/16 任務與心得  第81、最後一周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增2人，目前共完成43人 

→收案進行中人數：0人

→資料備份：已完成雲端上傳

資料連結：https://drive.google.com/drive/folders/16EAXqkDDqctWq9CjbSjNs9uL-WFhwOTf?usp=drive_link

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：
→完成收案人數：新增5人，目前共完成26人 

→收案進行中人數：0人

• 玉里實習生活動帶領逐字稿：

→已完成：3

• 玉正任務：已完成。跑完7~9分的剩餘文獻。並在玉正更新新的prompt後，再重跑60份文件

• 交接：

→應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證：交接給沛綺

→發展適用於思覺失調症患者之情感型心智理論電腦適性測驗：交接給沛綺(已跟士捷老師確認有否問題)

→逐字稿：交接給玉正，更新的活動李主任會陸續更新

→測驗工具：交接給沛綺，目前裝箱在行李箱內，放在李主任辦公室裡

→交接檔案連結：https://drive.google.com/drive/folders/0AC6mniin9AjjUk9PVA

心得與困難

1. 交接：因玉里的助理任職日期剛好與我錯開，所以認知測驗會在8/15與沛綺交接、士捷老師的測驗會跟其確認紀錄是否可以、逐字稿也在8/15與玉正交接。至於器材與同意書的部分，沛綺寄了一個大行李箱給我，交接完成後將所有測驗工具、同意書裝箱進去，之後放在李主任的辦公室內，等新的助理過來接手。而報帳等行政問題，等回台北後再找玉雲姊處理。
2. 收案注意事項：第1，在玉里老師協助下，最後查找所有個案的病歷。雖說老師當初提到該院區的大部分學員都是思覺失調個案，但翻看病歷後，還是發現2、3個雙極性情緒障礙或是其他診斷。這方面我特別標註並記錄。第2，由於只能查到個案最新的入院日期，而且入院可能包含進入急性、慢性、換院區等狀況，所以少部分我測完後轉走，或是在這半年內轉進新興院區的受測者，就無法查到更久以前的紀錄，不過印象中都沒有剛從急性出院的受試者。第3，士捷老師的測驗中本來要測YLH25，但因為後續比賽、工作等原因，無法在離開前完成測驗，加上無權限刪除測驗程式中的該號碼，所以就保留空號，並回報士捷老師。
3. 結束：時間過得真快，一下就到離開的時候，這段時間感謝老師與其他人的協助與指導，讓我可以完成研究助理的任務，體驗ChatGPT等AI的使用，並且去未去過的遠方出差(生下晚點打)

  

7/29~8/2 任務與心得  第八零周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增1人，目前共完成41人 

→收案進行中人數：1人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：
→完成收案人數：新增3人，目前共完成21人 

→收案進行中人數：1人

• 玉里實習生活動帶領逐字稿：

→已完成：3(第3份的逐字稿連結：https://drive.google.com/file/d/1rRjn3FK1iUQkKhMUJFczGlkn2upNSOo7/view?usp=drive_link)

→製作中：逐字稿SOP

• 玉正任務：已完成(跑2~6分的文獻，文獻總共有2~9分，7~9分的文獻為下周任務)

心得與困難

1. 找人：週三早上時同事轉告護理站的消息，說是某病房學員消失，於是我們便一起幫忙尋找，因為我騎機車，所以就去鎮上晃幾圈。路上忽然想到之前同事提及，通常學員消失有兩種，一種是想要回家，另一種是接近無意識的亂走。如果想要回家，大部分的人都會往玉里火車站的方向前進，加上新興院區到車站幾乎是一直線，很難會迷路，所以我就改成沿路邊騎邊看。最後到車站時看到學員坐在入口椅子，旁邊有剛到的護理師，我就在車站陪到有人開車把學員送回去，才結束這場意外。不過還好有找到人，否則學員不見真不知道可以去哪裡找。
2. 玉正任務：玉正請我根據他的要求，從眾多文獻中隨機抽出數篇文獻，將文獻檔案以及他設計的prompt(評估文獻品質的prompt)放入ChatGPT裡跑分數，最後再記錄其結果。文獻一開始就有評分，總共分成2~9分共8種，這周先跑2~6分的文獻，因為prompt太大，所以拆解成數段分別輸入ChatGPT。最後結果為20份文獻中，8份文獻與原本評分相同。已將紀錄傳給玉正，7~9分的文獻就等下周指令。
3. 結案準備：排出最後有希望測驗的學員，希望能按照計劃順利完成。

 

7/22~7/26 任務與心得  第79周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增1人，目前共完成40人 

→收案進行中人數：0人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：
→完成收案人數：新增1人，目前共完成18人 

→收案進行中人數：1人

• 玉里實習生活動帶領逐字稿：

→已完成：2

→製作中：1(進度：70%)

心得與困難

1. 颱風：因凱米颱風來襲的緣故，所以週三、週四施行颱風假，好在玉里晚上才轉成大風大雨。週五回辦公室檢查，器材全部安然無恙，只有治療袍莫名打溼，簡單整理後就恢復原樣
2. 碩士班面試：面試時教授主要觀察學生這三個方面，英文、成果、成績。英文是包含文獻閱讀，大約2、3頁文獻，30分鐘閱讀的閱讀時間，之後教授再進行問答；成果是對於該科系產出過的有價值內容，包含臨床經驗、研究成果、論文期刊等；最後為大學成績，當作輔助參考，畢竟如果研究所跟大學是同一間，那老師會比較清楚學生表現
3. 領任務：已詢問玉正，回復要等到下周才會收到任務

 

7/15~7/19 任務與心得  第七十八周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增2人，目前共完成39人 

→收案進行中人數：0人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：
→完成收案人數：新增1人，目前共完成17人 

→收案進行中人數：1人

• 玉里實習生活動帶領逐字稿：

→已完成：2

→製作中：1(進度：50%)

心得與困難

1. 半封院：上周聽到有病房封房的消息，這周左右確定所有學員7月外出的活動都先取消，目前我在的院區大約有2/3的病房都無法進出，聽護理站的說法是有出現肺炎、流感、肺結核等症狀。後來跟其他院區的老師聊天時，才知道其他院區也是感染嚴重，有點納悶現在是夏天而且這裡人口密度低，怎麼感染還像之前冬天一樣嚴重？也因如此，要再思考要怎麼調整收案的順序。
2. 電腦問題：這周出現兩個電腦狀況。一個是剛好Microsoft Office 更新或到期，導致word、excel皆無法使用，後來回報給沛綺處理，約時間使其直接操控我的電腦解決。另一個是這周兩名學員在做TMT、TOL測驗時，雖然測驗畫面顯示已存檔，但記錄做答內容的excel裡卻未找到資料，於是只好讓學員再測一次。神奇的是我回去自己測驗檢查時，一切皆正常，excel裡都可找到測驗資料。不過好在最後有成功讓學員完成測驗，但就做得比預期還久。後來懷疑會不會是兩名學員測驗時螢幕點的過於大力，使平板往前推到某些按鍵，所以才導致存檔出現問題，這部分下次再多注意。
3. 玉里實習生活動帶領逐字稿：因為這次實習生活動與音樂相關，活動中途會有許多超過10秒未說話的部分，所以會再補充中間停頓秒數，以及該停頓是在影片幾分幾秒的位子。要不然逐字稿上看起來實習生可能接續說兩句話，但實際上已經間隔數秒，是不同對話的情境。
4. 交接：目前從主任知道有人應徵助理，不過詢問後目前還未要與其交接。而目前進行的任務中，離開前人工智慧認知評估系統要找沛綺交接、電腦適性測驗找士傑老師、而逐字稿士找怡情。

 

7/8~7/12 任務與心得  第77周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增2人，目前共完成37人 

→收案進行中人數：2人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：
→完成收案人數：新增1人，目前共完成16人 

→收案進行中人數：1人

• 玉里實習生活動帶領逐字稿：

→已完成：2

→製作中：1(進度：10%)

心得與困難

1. 玉里實習生活動帶領逐字稿：在開頭的部份加上符號與說明，相關內容如下。☆：代表成員名字。因沒有完整的參與活動成員名冊，加上有些對話無法確定是在喊成員名字還是其他意思，為避免混淆，所以特別註記疑似有唸到名字的內容，例如：勵志(☆)。△：情境說明，以及補充影片中逐字稿無法呈現的內容。X：代表無法辨識的內容或文字，如果放在句子後面，代表無法理解該句意思。檔案的雲端連結如下：https://drive.google.com/file/d/1rZ-UVSC_nhJ7UWHPZQ4Cf2qtuLbB5ulS/view?usp=drive_link
2. 碩班與大學課程差異：詢問碩班與大學課程的差異，因為看課程名字感受不出太大區別。基本上碩班課程需要投入更多課外時間，大約就是原本上課的3倍時間(比如上課2小時，活去寫作業讀書6小時)，而我大學的課外投入時間，大約與原本上課時間相同或更少(主修課程)。另外碩班以方法學、學術研究課程為主，臨床則是相對較少。
3. 病房場勘：這周去病房看一下測試的可行性。因為該區病房沒有會客室，加上餐廳內閒雜人過多，容易分心，所以被推薦去附近的廣場看看。繞一圈後發現現場剛好有桌椅，以及有電的插座，雖然沒電風扇讓現場溫度偏高，但好在預計要測驗的學員(1~2名)就是因其能力、配合度高，經常要待在病房處理臨時任務，所以護理站才要求我下午來病房進行測驗。後來是用機車載測驗用的電腦、工具過去，到廣場後把東西都先準備好再去找學員，目前沒遇到太嚴重的問題，就是因為器材甚多，有時忘記要回辦公室拿。希望早點做完
   
   
   

 

7/1~7/5 任務與心得  第64+12周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增2人，目前共完成35人 

→收案進行中人數：1人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：
→完成收案人數：新增1人，目前共完成15人 

→收案進行中人數：1人

• 玉里實習生活動帶領逐字稿：

→已完成：1

→製作中：1(進度：90%)

心得與困難

1. 玉里實習生活動帶領逐字稿：製作中發現聽原版音檔比雅婷逐字稿中的音檔清楚，所以就改成電腦分別開雅婷逐字稿以及錄影檔兩個頁面，比較方便修正逐字稿。另外根據建議，如果在逐字稿有相關內容補充可以使用符號顯示，並在逐字稿的開頭說明符號意思，不過要使用那些符號目前尚未決定。而在說明情境時，嘗試結合活動企劃書中的活動步驟，這樣比較好知道治療師在哪一階段做了以下行為。最後發現在雅婷逐字稿完成後，還需要再下載檔案進行調整，才能產出一份清楚的逐字稿。以下為相關連結：https://drive.google.com/file/d/1rZ-UVSC_nhJ7UWHPZQ4Cf2qtuLbB5ulS/view?usp=drive_link
2. 日常觀察：玉里老師平常8點半左右會帶清潔隊打掃周遭環境，掃到9點左右。因為最近天氣太熱，有學員掃地時中暑，幸好休息後無大礙。後來有調整時間，老師也呼籲大家身體不舒服要講，但在一旁測驗時，還是可以些微感受到，掃地後有些學員能力有些微退化的跡象，不過因為清潔隊是有領薪水，所以還是需要每天來掃地

 

6/24~6/28 任務與心得  75周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增1人，目前共完成33人 

→收案進行中人數：2人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：
→完成收案人數：新增1人，目前共完成14人 

→收案進行中人數：1人

• 玉里實習生活動帶領逐字稿：

→已完成：1

→製作中：1

心得與困難

1. 玉里實習生活動帶領逐字稿：第一份逐字稿盡量按照影片眾人的對話，不過因為活動裡面不會只有主要治療師與學員的對話，而且錄影也無法清楚收錄所有人的聲音，光是雅婷逐字稿裡產出的某個角色一句話，其實可能就包含許多人的對話，只是雅婷沒有分辨出來。為了解決逐字稿某些部份有點雜亂無章的問題，建議可以加上情境描述，比如目前是活動討論中、這一段是協同領導者協助教學的情境等。重點是盡量能清楚再現治療師當時的狀況。以下為相關連結：https://drive.google.com/file/d/1JoB9Vca2VMCa4PPhZ5v3lBfGPgBXjI93/view?usp=drive_link
2. 重發助理招募：主任詢問我重發FB的助理招募貼文，因為目前無人投履歷，討論後決定將招募內容改的更簡單易懂。因為不確定是否規定助理一定需大學畢業，畢竟在玉里大學畢業又有空的人可能不多，所以後來於通話中詢問老師的意見，得到回應是主要能找到一個可信賴又有能力的人，好吧，就重新發文，希望之後有人去李主任那邊投履歷。
3. 受測觀察：這周收案的學員，一個比較有個性，原本拒絕測驗，卻在我要離開時表示想要嘗試，最後做到一半時忽然表示不想做。詢問後個案表示沒興趣，那我只好等下周時再問一下。另一位學員在測驗不久後發現寫字較慢，聊天中發現其慣用手的2~4指曾經嚴重骨折，秉持認知與配合度沒問題就試試看的心態做下去，結果只要是螢幕接觸性稍差的測驗，學員幾乎無法順利用電腦筆作答，因為電腦筆在螢幕點太久容易觸發右鍵功能，直接點出功能表。回報沛綺並做註記後，我就跟在學員後面按，他如果案失敗時(出現功能表)，我就盡快再點一次他剛剛按的位子。不過即使如此，還是花了比一般學員更多的時間才完成全部測驗
4. 關於未來討論：可以先考慮要怎樣的工作環境，而興趣很多時候，是要花時間去做，才能知道喜不喜歡

 

6/17~6/21 任務與心得  七十四周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增2人，目前共完成32人 

→收案進行中人數：0人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：
→完成收案人數：新增1人，目前共完成13人 

→收案進行中人數：1人

• 玉里實習生活動帶領逐字稿：

→已完成：1

→製作中：1

心得與困難

1. 玉里實習生活動帶領逐字稿：活動開始後逐字稿的難度逐漸變高，因為各種聲音混在一起，雅婷逐字稿會將其算成同一個人的聲音，有些時候是因為治療師單獨跟某特定學員說話，所以音量自然不大，需要觀看另一個角度的影片當輔助。好在主要負責活動的治療師音量始終大聲清楚，而協助的治療師是女生(現場只有一個女生)，所以還能分辨出學員與治療師。34分鐘左右的逐字稿大約整理3.5小時左右
2. 健心杯：這周剛好是玉里醫院才藝比賽(健心杯)，包含歌唱比賽，因為玉里醫院多個院區，所以經過上周通知，我們院區每個病房有學員報名參加唱歌。流程十分簡單，大家先選歌(我莫名嘗試幫忙打開被學員亂搞過的KTV)，依序唱，老師在旁打分數，選出前三名，隔幾天再找他們過來正式唱歌，錄影並剪輯後傳到雲端跟其他院區的學員比賽。最後前三名都是女性學員，在老師提醒下，趁他們來到辦公室並且心情不錯的空檔，找來做測驗，否則目前收案幾乎沒有女性學員(主要是因意願低、人數少)
3. 關於未來的打算：經通話後才意識到，應該是因為臺灣人文風情的原因，所以碩班更像是給還未確立走臨床或研究方向的治療師嘗試的地方，而研究助理算是給還沒決定要走碩般的治療師打探情報或嘗試的地方。
4. 手機狀況：周一早上發現在充電中的手機電池反而變少，有點緊張先關掉網路，研究後發現無法自行解決，好在用最後的電查到玉里修手機的地方。本來以為要換手機，結果店員好心幫我試試看各種方式，發現原來是充電器的問題，虛驚一場。
5. 徵助理PO文：處理好手機問題後，經過玉里FB社群管理員同意後，成功PO文，再等等看有沒有消息，以下為連結：https://www.facebook.com/groups/1423283931260934/posts/3712075832381721/?notif_id=1718845643677831&notif_t=group_post_approved&ref=notif

 

6/11~6/14 任務與心得  七十三周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增2人，目前共完成30人 

→收案進行中人數：0人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：
→完成收案人數：新增1人，目前共完成12人 

→收案進行中人數：1人

• ChatGPT逐字稿測驗：300/300(每個逐字稿需測3次，有50份逐字稿，測驗又分成是在相同/不同ChatGPT對話視窗，總共需測驗至少3x50x2=300次)
• 玉里實習生活動帶領逐字稿：進行中，校對第1份逐字稿字幕

心得與困難

1. 玉里實習生活動帶領逐字稿：雅婷逐字稿能辨認出治療師的聲音，但其他人的聲音全部被歸類為同一個人，詢問主任後，他希望可以辨別出其他人的聲音，並用學員1、學員2等方式顯示，加上活動現場有許多學員，所以目前還在聽聲音判斷是誰在說話。
2. ChatGPT逐字稿評估：整理記錄評估結果所花時間不多，反而是等ChatGPT產出回答花不少時間，可能是因為我剛好在尖峰時間用ChatGPT，雖然花費時間超出預期但最後在玉正的期限(6/17)前完成。
→ChatGPT同視窗：測驗中共出現29次錯誤， 有16次錯誤集中在第1次測驗的時候，絕大部分的錯誤為表格問題，比如表格依項目分開(玉正說instruction中提到所有項目需在同一個表格)、表格沒有框、或表格變成markdown的格式等；第2次測驗僅出現1次錯誤；第3次測驗有6次錯誤，大多是細節錯誤，比如表格最高/最低分的前三項與後面詳細解說的最高/最低分項目不同、 分數計算錯誤等。個人推測如果再多測幾次，可能會因表格的分數ChatGPT進行些微調整，但忘記更改其他地方(分數總結處或是最高最低分的三個項目)，導致出現更多細節上的問題。不過大部分細節問題，只要再繼續測1、2次，ChatGPT就會自行修正，不同於3周前同對話的測驗，一旦有錯誤，繼續測都還是顯示錯誤答案。唯一例外是第73份檔案，本來前面都顯示正常，但第3次測驗表格中更動其中一個項目分數，但其他部分未跟著改變，在測驗數次後發現無法改善，所以最後是直接指出錯誤的地方，使ChatGPT修正。另外在50份檔案中，有13份檔案的3次測驗都是相同分數、18份檔案的3次測驗中有2次是同分。

→ChatGPT不同視窗：測驗中共出現46次錯誤，表格依項目分開(9個表格而非一個表格)的問題占大宗，共31次，剩下大部分也是表格問題，例如表格沒有框或是根本沒跑出表格。細節上的問題反而非常少，只出現1次。另外雖然50份檔案中，有些測驗是相同分數，但項目上的給分卻是不同，不像是同視窗是每個項目給分都一樣。

以下為相關連結：https://docs.google.com/spreadsheets/d/1UPRX8m7rAEesqyByhJ91MXx394phBLpjBOD0Dhioum4/edit?usp=sharing

 

6/3~6/7 任務與心得  第8X9周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增2人，目前共完成28人 

→收案進行中人數：2人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：
→完成收案人數：新增1人，目前共完成11人 

→收案進行中人數：1人

• ChatGPT逐字稿評估：60/150(每次測驗都需重開視窗，每個逐字稿要測3次，50份逐字稿測150次)

心得與困難

1. 玉里活動帶領影片整理：檢查每一個聲音有問題的影片，目前整理出28部問題影片，有10部是全部都沒聲音、3部是全程皆有聲音但聲音較小、9部是聲音不到5分鐘、5部聲音超過5分鐘、1部是只有前面40秒有聲音。細節註記在聲音品質的評分處，以下為相關連結：https://docs.google.com/spreadsheets/d/1s2DqC-RA6Tceoy-JR_cRt4cbfOEvsw5j9Tt7jxpIsnQ/edit#gid=0
2. ChatGPT逐字稿評估：目前遇到比較奇怪的狀況是，總共有9個評分項目，理論上ChatGPT會產出一個包含9項評估項目的評分表格，不過現在大約有兩成的機率遇到ChatGPT產出9個表格的情況，雖說玉正要求的內容都有，但他提到在GPT的指令中有強調單一表格，所以只好重開視窗再來一次
3. 端午節：週五有端午節活動，因為人數問題，分成兩周找不同學員來吃粽子、喝綠豆湯，而我也因為沒場地測驗，所以在一旁幫忙。也因端午節的關係，最近去病房時許多學員都問我能不能去吃粽子。端午節快樂~天氣變化好大，最近有點頭暈
   
   
   
   

  

5/27~5/31 任務與心得  第71周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增1人，目前共完成26人 

→收案進行中人數：2人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：共完成10人，有2人尚未完成
→完成收案人數：新增1人，目前共完成10人 

→收案進行中人數：2人

• 玉里實習生活動帶領檔案與影片整理：109/109(總共有109場活動帶領、每場約有1或2部影片，共167部影片)
• ChatGPT逐字稿評估：90/90(每個逐字稿要測3次，30份逐字稿要測90次)
• GPT設計介紹：已完成

心得與困難

1. 玉里實習生活動帶領檔案與影片整理：
→111第二梯： 共20部影片

→111第三梯：共38部影片

→112第一梯：共43部影片

→112第二梯：共27部影片

→112第三梯：共39部影片

→總計：共167部影片，約24部有聲音相關問題(再檢查註解)，大部分約於活動開始後5分鐘內消音，少部分在活動開始約20分鐘或一半時消音，再詢問主任是否採納這類型影片。另外有些是鏡頭方向問題，有些畫面略偏離活動或是治療師，不過仍可轉成逐字稿。以下為連結檔案：https://docs.google.com/spreadsheets/d/1s2DqC-RA6Tceoy-JR_cRt4cbfOEvsw5j9Tt7jxpIsnQ/edit?usp=sharing

1. 學習逐字稿製作：需要更清晰完成玉里活動影片整理後，收到新任務是產出影片的逐字稿，並用ChatGPT整理其重點。於是透過玉正的線上教學，了解雅婷逐字稿的使用方式。大致聽完後感覺這個任務將會十分費工費時，並且轉換文字的過程會需要良好網路(如果50分鐘的影片需要20~30分鐘轉換時間)。另外在嘗試的過程中忽然想到一個問題，畢竟每次活動都這麼多人，不知道雅婷能不能準確辨認出這麼多人的聲音，希望不會出現問題。
2. 拜訪玉里：這周因為老師來玉里醫院演講，莫名吃到一頓晚餐。晚餐期間跟沛綺聊到一些關於未來的問題，需要再回去查點資料，想想下一個人生任務。
3. GPT設計介紹報告：週三線上報告近期GPT任務，按順序介紹每個講者內容，一開始是榆函介紹他前陣子負責的任務，比如巴氏量表、FIFE 評估和職能治療介紹的GPT標準病人設計；再來換我簡單介紹精神版職能治療介紹GPT的製作過程，參考實體OSCE檔案，將裡面部分內容改成GPT的instruction，並說明製作過程中遇到的挑戰；而玉正提到GKCSAF評分治療師的溝通能力，剛好我完成他上次交代的逐字稿評估任務，我才比較了解，原來他是在用不同方式，在測驗ChatGPT的關於評分的效度與信度，而我在做的有點像是在跑流程產生數據；最後怡晴則是介紹同理心技巧評估GPT，雖說對於這方面不熟，但提及ChatGPT對於多種對話情境辨識困難時，想到如果ChatGPT哪天對這方面再無障礙時，或許就真的具備人的性質。事後閱讀演講逐字稿，看到裡面一些指令，比如：請協助彙整二檔案內容，請重點摘要內容，必要時舉例說之。以利未參與者可快速理解內容。或許未來整理逐字稿時也可用到
4. 黃仁勳臺大演講：6/2晚間時輝達執行長黃仁勳將在台大演講「AI如何帶動全球新產業革命發展」，雖說與目前任務無關，但之後有空還是想看翻譯內容，聽聽走在前沿的人如何描述可能的未來。(而且那在我家附近，真應該去體育館外圍晃晃)

 

5/20~5/24 任務與心得  柒零

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增2人，目前共完成25人 

→收案進行中人數：1人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：共完成9人，有1人尚未完成
• 玉里實習生活動帶領檔案與影片整理：91/109(補齊因為格式問題沒出現評分的成績)
• ChatGPT逐字稿評估：72/90
• GPT設計介紹：9/10

心得與困難

1. ChatGPT逐字稿評估：同上週任務，唯一不同的是這次任務是要在同一個對話裡面，成功產出3次評估結果(上次每個評估都是輸入到不同對話)。因為是同一個對話裡面，一旦後面有出現錯誤，有機會要3個都重測，原因見後面。最麻煩的應該就是出現【違反使用政策】，因為就算評估結果符合格式，也無法下載連結，而且某些對話稿在同一對話的評估時容易遇到，之後再詢問玉正的要如何處理這種狀況，也蠻好奇是怎麼判斷違反使用策略(該不會是用ChatGPT在抓關鍵字)。雖然評估還未完成，但可以觀察到有大約半數的治療師的3份對話稿中，會有2份對話稿的評分完全相同，畢竟在相同對話中的重複性就是比不同對話高。但容易有一個問題，如果有出現錯誤的評估結果時，後面也容易都是出現一樣的結果，所以玉正後來補充，可以再重新開一個對話再進行評估，並做紀錄。
2. IRB文件準備：因為玉里審查IRB的關係，根據沛綺指示，週五帶著指定的收案同意書去總區一趟，用那邊的設備掃描成電子檔再傳給她，同時因為李主任那邊需要紙本檔，加上剛好主任那時有事情，所以我再去印副本，士傑老師與認知測驗分別各印3份，共6份。中途一邊跟沛綺連絡一邊操作，影印機還不小心印到沒紙。只能說這種文件準備十分耗時費工。
3. GPT設計介紹：一開始看到時沒多想，起頭開始做後，才忽然想到讀者是誰，畢竟平時周四下午都有交流，所以才在後來詢問老師相關問題，並知道原來是跟有使用ChatGPT經驗的人分享。
4. 玉里一日遊：大約每半年一次，玉里醫院會帶領適合的學員一日遊，這次剛好在這周五。跟老師聊天知道這次會搭遊覽車去台東市的大賣場，順路經過台9線的一些景點。而老師與學員的人數比是1：5、6左右，雖然路上天氣不佳，但一日遊還是順利完成。

 

5/13~5/17 任務與心得  69周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增2人，目前共完成23人 

→收案進行中人數：1人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：完成6人
• 對於ChatGPT逐字稿評估之測驗：90/90

心得與困難

1. ChatGPT逐字稿評估：測驗介紹：每個治療師的逐字稿有3份，30個治療師共90份。我任務是將word放入ChatGPT，輸入「這是xxx治療師，請評分」，並記錄回答結果，測驗過程。大約在測驗進度至三分之一時，ChatGPT改版變成GPT-4o，詢問經玉正確認後繼續測驗，直到最後十份時玉正通知我，要改成測到每一份逐字稿的測驗結果都要符合預期，並記錄重測的次數(之前是如果檔案不符合預期，紀錄即可)，於是再把前面有狀況的檔案重測一遍。測驗觀察。測驗項目共9項，每項5分，總分45分，90份檔案平均分數為30.5。所有結果都有正確評估到9個評估項目，沒有出現增加、減少項目的情況；在ChatGPT改版前，至少6成以上的分數顯示的格式錯誤，變成GPT-4o後，第一天測也是5成左右分數顯示不正確，但之後測有問題的分數顯示就低於2成；關於表現最好或最差的3個項目與評分表結果出現矛盾，總共遇不到5次，不過需要逐條比對，才發現有些中間分數的項目被丟到最好或最差的3個項目中。
2. GPT-4o：雖然只是在逐字稿評估時使用，但可以明顯感受到改版後的運行速度比改版前快，而且排除第一天的狀況，未符合標準的輸出結果也低於2成，如有問題，通常只要再跑一次就能輸出正確的結果，最多3次，比起舊版ChatGPT節省時間，之後有再多嘗試其功能
3. 新任務：可嘗試將思覺失調個案與治療師的對話放入GPT，使其學習模仿，或許可以節省範例的字數，不過我揣測如何使ChatGPT在參考許多對話後，能完整帶入測驗中的標準病人，會是一種挑戰

 

5/6~5/10 任務與心得  六十八周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增2人，目前共完成21人 

→收案進行中人數：1人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：完成6人
• 介紹職能治療GPT設計：修改大綱架構，並製作完成精神職能介紹GPT2，等之後回饋再更改
• 協助評估：6/90

心得與困難

1. 新任務：協助玉正測試GKCSAF溝通技巧，將檔案輸入進去讓ChatGPT操作，之後再紀錄其產出的結果是否有達到原本所要求的內容，簡單且繁瑣的任務。不過嘗試操作後發現要吃網速，下周再移到訊號較好的位子繼續操作，預計周五前完成
2. GPT測驗感想：這周做過數個GPT測驗後有一個感想，除了客觀資料外，如何使人覺得標準病人的差異性，而不會覺得這只是換一個診斷的相同標準病人。主要是之前在測小兒與生理時，可以感受到兩者的標準病人對話、個性不太一樣(當然一部分是因為小兒的標準病人是家長)。但之前測驗精神第一個設計的標準病人(GPT1)、第二個設計的標準病人(GPT2)時，往往會出現幾乎相同的對話過程，除了症狀外區別不大，所以後來將GPT2的對話特色嘗試更鮮明化，這樣可以讓受測者明顯感受到是與兩個不同的標準病人進行測驗
3. 群聚：最近玉里老師通知我部分病房爆發群聚，我好奇問不是之前也說病房有群聚，老師表示上次只是普通感冒，這次是新冠群聚，現在似乎護理人員也有人確診，之後視情況會再做人員出入調整。好在這周受測者都沒確診，不過因為錄影時盡量不戴口罩，所以還是讓他們測驗前先洗手，而我測驗全程也戴著口罩以及跟著洗手
4. 電腦更新：電腦更新後影響一些測驗項目的運行，後來跟沛綺下載更新檔後便無問題

 

4/29~5/3 任務與心得  第67周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增2人，目前共完成19人 

→收案進行中人數：1人

→資料備份：因忘記帶隨身碟，下周補全雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：完成6人
• 介紹職能治療GPT設計：修改大綱架構，並製作另一個職能介紹GPT，進度約80%，修正測驗中出現不事宜的對話
• 協助測驗GPT

心得與困難

1. 介紹職能治療GPT架構：研究我跟瑜函的GPT架構後，或許可分成關於考站，以及標準病人兩部份。前者要定義考站的目的，以及測驗的內容，類似於房屋的牆壁，而標準病人就像屋內家具，經過我們的設計讓整個測驗內容更加豐富。只是做過其他領域的GPT後，發現精神、小兒、生理的標準病人所呈現資料的歧異度高，可能因為在精神待一陣子，所以嘗試小兒領域的GPT時，除了回憶之前實習經驗外，多少產出有種原來小兒需要這些設定 (比如精細東做的發展年齡)的想法，看來還需要再繼續嘗試
2. 測驗安排介紹：目前每周大約可以分成上下午共10個測驗時段，早上時間是從9：00~10：30，因為前面可能病房護理師還沒忙完，進病房內諸多不便，而10：30左右病房就要準備午餐，有時受測者可能是打飯人員，盡量午餐前送回去。而下午時段則是2：30~4：30左右，主要有時2：00病房會分發水果或點心，等他們測完就可以測驗，而下午則是4：30會準備晚餐。另外每個病房每周都會定期去福利社採購，上週聽受測者因為福利社結帳機有問題，不知道之後會怎麼安排。另外醫院不定期會做各科檢查，大部分都是我去找受試者時才知道。此外認知能力較佳的學員會被安排工作，有工作的學員大致可以分成全天班、半天班以及有事任務型：全天班就要詢問輪班日期，有些整天外出，或是每次去找的時候都表示再忙；而半天班的學員通常下午有空，但有些時候，比如工作過累就出現明顯的症狀波動；有事才有任務的類型通常都在病房協助，所以玉里老師也不確定他們認知程度，得實際測驗才能有答案。最後我一周大都能測8個時段，剩下時段可以容錯或是做其他任務，並且因為認知測驗分4個部份，第4部份較短有時可以跟其他部份合併或是同一時段讓兩個受測者前後測。總之就是要看當下的情況去做較好的安排
3. 勞動節：因為跟著玉里老師作息，改成5/3放勞動節，順便出去玩，下周要努力補上進度

 

4/22~4/26 任務與心得  🤙🤙周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增1人，目前共完成17人 

→收案進行中人數：1人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：完成6人
• 介紹職能治療GPT設計：修改完成，製作另一個職能介紹GPT，進度約60%

心得與困難

1. 介紹職能治療GPT：拿自己帳號給玉里老師做測驗後，她表示如果按照我目前的病情設定，該個案的說話模式應該要更直接，不會出現拐彎抹角或是包裝。之後想起平常測驗時有做簡單的IADL調查，比對發現的確是症狀程度與說話模式對應不上，而且IADL功能較佳的個案大部分都會安排簡單的工作。後來參考那些IADL能力較差的受試者平常對話的經驗，於是在範例的部分刪除許多原本內容，改成只補上ADL的細節描述以及必要參考對話，其他部分就讓ChatGPT自由發揮，只要在限制範圍內的離題或是回答，也會接近我跟受試者的日常對話。後來經過測試後再給老師看我跟標準病人對話，老師就表示有那種她平常跟個案對話的感覺
2. 協助BI測驗：第一次測驗時主要是因為Google meeting 的帳號問題被卡住許久，得到帳號與密碼後就順利進入。第二次則是因為受試者使用手機進行測驗，看她一字一字的輸入ChatGPT的帳號密碼時，就感覺這次測驗會拖延(中間還輸入錯誤)，另外需要分清楚sign up 與log in 的區別，才能避免進不去受測畫面。大致上而言因為前面有榆函等人的經驗以及整理，才能清楚知道遇到什麼問題時要怎麼處理，比如時間拖太久要怎麼處理等，同時也要隨時更新他們的資訊
3. 地震：周一至周二之間的深夜，如同鬧鐘一般，從兩點起並陸續地震到五點多，說實話個人感覺震的規模不大，甚至不一定會起床，不過地震警報倒是響了一整夜，等到太陽升起時精神已經先耗弱。希望之後地震不會有更大的災情

 

4/15~4/19 任務與心得  第陸拾伍周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增1人，目前共完成16人 

→收案進行中人數：1人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：完成6人
• ChatGPT 輔助設計治療性活動團體之成效整理：整理12份團體活動
• 介紹職能治療GPT設計：重新修改中，並思考另外一個思覺失調GPT

心得與困難

1. 測驗觀察：測驗中YHL016時遇到一個技術問題，因平板只要同一個位子點太久就會出現滑鼠右鍵點擊的清單，而他總是在VMT的測驗中出現這樣的問題。該測驗需要記憶圓圈變色的順序，再依序點擊，如果每個圓都按太久跑出右鍵的清單，就容易影響作答品質與時間，雖然教學示範以及手把手帶他點擊，並且其他測驗中都沒遇到類似狀況，但還是莫名其妙在這裡卡住許久。更奇特的是，後來因為時間關係讓其先做Corsi(跟VMT是同類型的測驗)，學員順利且快速的點擊每個圖形，完全沒有出現VMT測驗中的問題，問他怎麼做到，他也只是笑笑不答(我快昏倒)。下周先把其他測驗做完，再研究如何讓他完成VMT
2. 玉里醫院院內事務：周一從老師那邊傳來消息，平常主要收案的病房目前群聚感染，如果受測者感冒的話就先暫停測驗，還好這周的受測者目前都沒問題，只是以後進出病房要多注意。此外醫院同時這周大規模調動病人(轉院區)，護理站一片忙亂。希望調過來的學員認知能力不錯，老師表示她會幫我打聽看看新來的病人狀況如何
3. 輸入實習生團體活動資料：跟實習生聊天時，忽然發現第三梯實習已經接近尾聲，於是我去翻ChatGPT 輔助設計治療性活動團體之成效的雲端，發現第三批檔案已經陸續上傳，數量眾多，就先開始慢慢整理
4. OT介紹GPT：研究老師跟GPT的對話後，忽然有點想通，畢竟該GPT設定上是沉默寡言，雖然在每一句的回答是寡言，但是問題問得很積極，完全沒有沉默的感覺，而且有些問題的時機有點奇怪。我回去修改的同時也拿給玉里老師試試看。不知道能不能讓ChatGPT試做GPT(他當實習生又當標準病人)，這樣一定比給真人試做來的方便
5. 巴士量表GPT測驗：因為之後要給學生測驗評估巴士量表的GPT，所以除了分配與解釋任務外，也要幫榆函測驗她設計的4個相關GPT(雖然我記得開會時提到GPT應該是5個才對？)

 

4/8~4/12 任務與心得  第8X8周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增1人，目前共完成15人

→收案進行中人數：1人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：完成5人
• 介紹職能治療GPT設計：重新修改中，進度約2/10

心得與困難

1. 收案臨時狀況：老師推薦一個認知佳的個案，她起初嫌麻煩不想參加測驗，說服很久讓她移動到測驗的房間，先嘗試MoCA，途中也順便詢問一些IADL的資料。等完成MoCA(滿分)後，想要讓她繼續測下去，她立刻說測到這裡就好。測驗時因為詢問IADL財務管理目時，有提及是否了解每個月的收入與支出，她忽然問我知不知道病房工作的薪水怎麼算(她在病房內負責分類藥物)，我表示不知道，可能要問病房負責的人。等她回去不久，病房護理師就打電話過來反應，受試者回去後，她跟許多病房工作的病人都跑來詢問薪水算法。被護理師念一頓後，老師解釋主要因為病房有一套自己的薪水算法，跟病人解釋會增加他們的工作量，並且如果下次遇到這種高認知的病人，就少提到薪水的問題，或是把責任導向更高一層的單位(總務處)，原來如此
2. 跳蚤：仔細思考，過去幾乎沒遇到跳蚤，所以一開始的反應就是噴藥跟洗棉被，不過可能因為有跳蚤蛋的關係，所以過這麼久還是會被咬，並且某天還發現已經可以徒手滅跳蚤(這應該代表被吸許多血吧？)。之後聽建議，等下周去全聯研究並試試看水煙的效果，希望能改善狀況，要不然好煩
3. 介紹職能治療GPT設計：這周嘗試設計簡單的職能治療GPT介紹，不過目前的問題是個案過於主動，需要再設計其對話模式以符合現實。此外根據後來討論的設定，該個案設定為第一次接觸職能治療，而職能治療的一般性介紹是由治療師主動介紹，至於針對個案的個人化介紹，可以用問的方式慢慢帶出。另外為了讓治療師能更集中於職能治療的介紹，需要在考生指引中放入可協助個人化介紹的資訊，不過復健期待還是要治療師問。此外榆函有說到生理的治療師曾提過，個案可能不太會好奇職能治療是甚麼，但會問為甚麼我(不)要做這個儀器，在針對個案之OT介紹中可能會主動一點。開會時忽然也想到那原本主動的版本，或許可以拿來當小兒領域對話的家長
4. 回診：週五回去臺大看診，身體一如既往。只是明明已經早上十點左右，第一次看到有3/4的病人都還沒出現，離開時醫生跟護理師就在裡面乾等

 

4/1~4/3 任務與心得  第63周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增0人，目前共完成14人

→收案進行中人數：1人

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：完成4人
• 介紹職能治療GPT設計：目前在設計SP之特性/指示之架構，進度約3/10

心得與困難

1. 收案：這周因為其中一名受試者只能於下午進行測驗，加上外在因素影響使該受試者病情發作，所以這周人工智慧認知評估系統的測驗無新增人員，而士傑老師的測驗則順利再完成1人
2. 地震：4/3早上八點左右發生兩場較大的地震，玉里震度4級，影響不大。北花蓮出現多起災情，公路與鐵路中斷，本來以為連假無法回去臺北，最後在搶修與誤點中，搭火車再等待與轉車中慢慢北上。希望花蓮重建順利
3. 資料檢索：承上週內容，關於第四點：制定檢測學生學習狀況的評估工具，該文獻作者先讓ChatGPT做三題美國護理師國考題目(NCLEX)，再要求其產出類似國考風格的多選題，並附上答案與解析。第七點：評估與修訂文章，文獻作者先輸入指令：我正在撰寫一篇文章，並希望你對文章內容進行反饋。並在得到ChatGPT確認後放入文獻內容，不過因受限當時ChatGPT的字數限制，作者是將文獻分段輸入，最後再請ChatGPT評估並給建議。第八點：文獻或數據摘要，文獻作者先輸入指令：請查看以下網站上找到的文件，並為我總結該網站上包含的信息：(一個美國醫療相關的法律網址)。作者之後再根據ChatGPT的回答內容，詢問一些細節的問題。以下為該文獻實際操作ChatGPT的紀錄：https://zenodo.org/records/8178876
4. Connected Papers：找到一個協助資料檢索的工具，叫Connected Papers，該程式會以關係圖的方式，顯示與該篇相關的文獻，比如引用或是被引用的文章，依遠近表示與該篇之相關性。點選關係圖中的圓圈時，螢幕右側會出現該文獻的標題與摘要。因未申請會員，嘗試次數有限，以下為網址：https://www.connectedpapers.com/。下圖以Performance of ChatGPT on the National Korean Occupational Therapy Licensing Examination為示範

   

   
   

 

3/25~3/29 任務與心得  第62周

任務與進展

短期任務

• 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證)：

→完成收案人數：新增2人，目前共完成14人

→收案進行中人數：無

→資料備份：已完成雲端上傳

• 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗)：完成3人
• ChatGPT：已修改完上次內容，等待測驗中
• 介紹職能治療GPT設計：目前在設計SP之特性/指示之架構，進度約2/10

心得與困難

1. ChatGPT測驗：測試榆函和玉正的GPT。先說榆函FIFE測驗，首先要理解FIFE需要花不少時間，我是邊問邊了解整個測驗的內容，並且因為該測驗內容分成4個word檔，有時會漏掉一些內容。關於標準病人的部分，可以感受到標準病人十分專業，似乎有醫療背景，所以測驗起來十分順利，不用太多提醒就能得出回答，並且在詢問第三題OT知識時，標準病人就順便提到第四題服務需求的內容。測完後就將這些發現回報給榆函。至於玉正的GPT剛好也是職能訪談，為生理版，詢問下來十分順利。另外發現在一般性訪談中，可能因為自己沒有拿筆記或是提示的資料，我很容易遺漏某些問題，所以常常問到後面想到時才補問，也不知道有沒有遺漏的部分
2. 介紹職能治療GPT：在設計時忽然想到如果是小兒領域的標準個案，其對話內容可能要再思考要如何接近一般小孩，畢竟離小兒實習已經一陣子，而且介紹職能治療的內容，感覺更像是職能治療對小兒標準個案照顧者的對話。另外下周有空也詢問一下榆函跟玉正他們平常是如何設計標準病人的基本資料
3. 跳蚤：跟玉里老師提及膚問題時，她看一眼後表示：你還被跳蚤咬了，怪不得會這麼癢。 仔細一算身上已經被咬了十幾個包，因為之前以為是小黑蚊才沒注意。之後根據老師和網路的建議經常洗衣服，搭配殺蟲劑再把房間陰暗潮濕處掃幾次，看看之後有無改善。不過也很納悶跳蚤到底是從哪裡傳來，聽說醫院有些個案可能身上帶跳蚤，或許測驗的桌椅也要消毒一下，希望一切順利
4. 資料檢索：在Accelerating medical education with ChatGPT: an implementation guide文章中，提及12處ChatGPT可應用的範圍，以下為範圍列表：
   
   
   一、設計醫學教育課程
   二、制定並完善教育課程大綱
   三、針對案例(case-based learning)或團隊學習，開發相關的學習情境與檢查單
   四、制定檢測學生學習狀況的評估工具
   五、理論實際應用
   六、針對學生學習不足之處，定制個性化學習計劃
   七、評估與修訂學生作業
   八、文獻或數據摘要
   九、利用ChatGPT 協助研究活動
   十、撰寫針對醫療機構或組織的項目提案
   十一、針對醫療問題，發展具同理心與全人思考的解決方案
   十二、撰寫參考文獻
   
   
   將文獻看一遍本來沒找到每個項目的prompt，因為以為是放在最底下，所以一直沒找到，後來周末再翻一次才注意到是放在Data availability裡。感覺四、七、八關聯性較高，之後再讀其內容。以下是相關連結：https://www.ncbi.nlm.nih.gov/pmc/articles/PMC10910173/# https://zenodo.org/records/8178876