2024年6月24日 星期一

 

6/17~6/21 任務與心得  七十四周

任務與進展

短期任務

  • 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證):
    →完成收案人數:新增2人,目前共完成32人 
    →收案進行中人數:0人
    →資料備份:已完成雲端上傳

  • 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗):
  • 完成收案人數:新增1人,目前共完成13人 
    →收案進行中人數:1人

  • 玉里實習生活動帶領逐字稿:

    →已完成:1
    →製作中:1

心得與困難

  1. 玉里實習生活動帶領逐字稿:活動開始後逐字稿的難度逐漸變高,因為各種聲音混在一起,雅婷逐字稿會將其算成同一個人的聲音,有些時候是因為治療師單獨跟某特定學員說話,所以音量自然不大,需要觀看另一個角度的影片當輔助。好在主要負責活動的治療師音量始終大聲清楚,而協助的治療師是女生(現場只有一個女生),所以還能分辨出學員與治療師。34分鐘左右的逐字稿大約整理3.5小時左右
  2. 健心杯:這周剛好是玉里醫院才藝比賽(健心杯),包含歌唱比賽,因為玉里醫院多個院區,所以經過上周通知,我們院區每個病房有學員報名參加唱歌。流程十分簡單,大家先選歌(我莫名嘗試幫忙打開被學員亂搞過的KTV),依序唱,老師在旁打分數,選出前三名,隔幾天再找他們過來正式唱歌,錄影並剪輯後傳到雲端跟其他院區的學員比賽。最後前三名都是女性學員,在老師提醒下,趁他們來到辦公室並且心情不錯的空檔,找來做測驗,否則目前收案幾乎沒有女性學員(主要是因意願低、人數少)
  3. 關於未來的打算:經通話後才意識到,應該是因為臺灣人文風情的原因,所以碩班更像是給還未確立走臨床或研究方向的治療師嘗試的地方,而研究助理算是給還沒決定要走碩般的治療師打探情報或嘗試的地方。
  4. 手機狀況:周一早上發現在充電中的手機電池反而變少,有點緊張先關掉網路,研究後發現無法自行解決,好在用最後的電查到玉里修手機的地方。本來以為要換手機,結果店員好心幫我試試看各種方式,發現原來是充電器的問題,虛驚一場。
  5. 徵助理PO文:處理好手機問題後,經過玉里FB社群管理員同意後,成功PO文,再等等看有沒有消息,以下為連結:https://www.facebook.com/groups/1423283931260934/posts/3712075832381721/?notif_id=1718845643677831&notif_t=group_post_approved&ref=notif

2024年6月18日 星期二

 

6/11~6/14 任務與心得  七十三周

任務與進展

短期任務

  • 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證):
    →完成收案人數:新增2人,目前共完成30人 
    →收案進行中人數:0人
    →資料備份:已完成雲端上傳

  • 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗):
  • 完成收案人數:新增1人,目前共完成12人 
    →收案進行中人數:1人

  • ChatGPT逐字稿測驗:300/300(每個逐字稿需測3次,有50份逐字稿,測驗又分成是在相同/不同ChatGPT對話視窗,總共需測驗至少3x50x2=300次)
  • 玉里實習生活動帶領逐字稿:進行中,校對第1份逐字稿字幕

心得與困難

  1. 玉里實習生活動帶領逐字稿:雅婷逐字稿能辨認出治療師的聲音,但其他人的聲音全部被歸類為同一個人,詢問主任後,他希望可以辨別出其他人的聲音,並用學員1、學員2等方式顯示,加上活動現場有許多學員,所以目前還在聽聲音判斷是誰在說話。
  2. ChatGPT逐字稿評估:整理記錄評估結果所花時間不多,反而是等ChatGPT產出回答花不少時間,可能是因為我剛好在尖峰時間用ChatGPT,雖然花費時間超出預期但最後在玉正的期限(6/17)前完成。
  3. →ChatGPT同視窗:測驗中共出現29次錯誤, 有16次錯誤集中在第1次測驗的時候,絕大部分的錯誤為表格問題,比如表格依項目分開(玉正說instruction中提到所有項目需在同一個表格)、表格沒有框、或表格變成markdown的格式等;第2次測驗僅出現1次錯誤;第3次測驗有6次錯誤,大多是細節錯誤,比如表格最高/最低分的前三項與後面詳細解說的最高/最低分項目不同、 分數計算錯誤等。個人推測如果再多測幾次,可能會因表格的分數ChatGPT進行些微調整,但忘記更改其他地方(分數總結處或是最高最低分的三個項目),導致出現更多細節上的問題。不過大部分細節問題,只要再繼續測1、2次,ChatGPT就會自行修正,不同於3周前同對話的測驗,一旦有錯誤,繼續測都還是顯示錯誤答案。唯一例外是第73份檔案,本來前面都顯示正常,但第3次測驗表格中更動其中一個項目分數,但其他部分未跟著改變,在測驗數次後發現無法改善,所以最後是直接指出錯誤的地方,使ChatGPT修正。另外在50份檔案中,有13份檔案的3次測驗都是相同分數、18份檔案的3次測驗中有2次是同分。
    →ChatGPT不同視窗:測驗中共出現46次錯誤,表格依項目分開(9個表格而非一個表格)的問題占大宗,共31次,剩下大部分也是表格問題,例如表格沒有框或是根本沒跑出表格。細節上的問題反而非常少,只出現1次。另外雖然50份檔案中,有些測驗是相同分數,但項目上的給分卻是不同,不像是同視窗是每個項目給分都一樣。
    以下為相關連結:https://docs.google.com/spreadsheets/d/1UPRX8m7rAEesqyByhJ91MXx394phBLpjBOD0Dhioum4/edit?usp=sharing

2024年6月11日 星期二

 

6/3~6/7 任務與心得  第8X9周

任務與進展

短期任務

  • 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證):
    →完成收案人數:新增2人,目前共完成28人 
    →收案進行中人數:2人
    →資料備份:已完成雲端上傳

  • 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗):
  • 完成收案人數:新增1人,目前共完成11人 
    →收案進行中人數:1人

  • ChatGPT逐字稿評估:60/150(每次測驗都需重開視窗,每個逐字稿要測3次,50份逐字稿測150次)

心得與困難

  1. 玉里活動帶領影片整理:檢查每一個聲音有問題的影片,目前整理出28部問題影片,有10部是全部都沒聲音、3部是全程皆有聲音但聲音較小、9部是聲音不到5分鐘、5部聲音超過5分鐘、1部是只有前面40秒有聲音。細節註記在聲音品質的評分處,以下為相關連結:https://docs.google.com/spreadsheets/d/1s2DqC-RA6Tceoy-JR_cRt4cbfOEvsw5j9Tt7jxpIsnQ/edit#gid=0
  2. ChatGPT逐字稿評估:目前遇到比較奇怪的狀況是,總共有9個評分項目,理論上ChatGPT會產出一個包含9項評估項目的評分表格,不過現在大約有兩成的機率遇到ChatGPT產出9個表格的情況,雖說玉正要求的內容都有,但他提到在GPT的指令中有強調單一表格,所以只好重開視窗再來一次
  3. 端午節:週五有端午節活動,因為人數問題,分成兩周找不同學員來吃粽子、喝綠豆湯,而我也因為沒場地測驗,所以在一旁幫忙。也因端午節的關係,最近去病房時許多學員都問我能不能去吃粽子。端午節快樂~天氣變化好大,最近有點頭暈


2024年6月2日 星期日

  

5/27~5/31 任務與心得  第71周

任務與進展

短期任務

  • 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證):
    →完成收案人數:新增1人,目前共完成26人 
    →收案進行中人數:2人
    →資料備份:已完成雲端上傳

  • 玉里收案(發展適用於思覺失調症患者之情感型心智理論電腦適性測驗):共完成10人,有2人尚未完成
  • 完成收案人數:新增1人,目前共完成10人 
    →收案進行中人數:2人

  • 玉里實習生活動帶領檔案與影片整理:109/109(總共有109場活動帶領、每場約有1或2部影片,共167部影片)
  • ChatGPT逐字稿評估:90/90(每個逐字稿要測3次,30份逐字稿要測90次)
  • GPT設計介紹:已完成

心得與困難

  1. 玉里實習生活動帶領檔案與影片整理:
  2. →111第二梯: 共20部影片
    →111第三梯:共38部影片
    →112第一梯:共43部影片
    →112第二梯:共27部影片
    →112第三梯:共39部影片
    →總計:共167部影片,約24部有聲音相關問題(再檢查註解),大部分約於活動開始後5分鐘內消音,少部分在活動開始約20分鐘或一半時消音,再詢問主任是否採納這類型影片。另外有些是鏡頭方向問題,有些畫面略偏離活動或是治療師,不過仍可轉成逐字稿。以下為連結檔案:https://docs.google.com/spreadsheets/d/1s2DqC-RA6Tceoy-JR_cRt4cbfOEvsw5j9Tt7jxpIsnQ/edit?usp=sharing
  1. 學習逐字稿製作:需要更清晰完成玉里活動影片整理後,收到新任務是產出影片的逐字稿,並用ChatGPT整理其重點。於是透過玉正的線上教學,了解雅婷逐字稿的使用方式。大致聽完後感覺這個任務將會十分費工費時,並且轉換文字的過程會需要良好網路(如果50分鐘的影片需要20~30分鐘轉換時間)。另外在嘗試的過程中忽然想到一個問題,畢竟每次活動都這麼多人,不知道雅婷能不能準確辨認出這麼多人的聲音,希望不會出現問題。
  2. 拜訪玉里:這周因為老師來玉里醫院演講,莫名吃到一頓晚餐。晚餐期間跟沛綺聊到一些關於未來的問題,需要再回去查點資料,想想下一個人生任務。
  3. GPT設計介紹報告:週三線上報告近期GPT任務,按順序介紹每個講者內容,一開始是榆函介紹他前陣子負責的任務,比如巴氏量表、FIFE 評估和職能治療介紹的GPT標準病人設計;再來換我簡單介紹精神版職能治療介紹GPT的製作過程,參考實體OSCE檔案,將裡面部分內容改成GPT的instruction,並說明製作過程中遇到的挑戰;而玉正提到GKCSAF評分治療師的溝通能力,剛好我完成他上次交代的逐字稿評估任務,我才比較了解,原來他是在用不同方式,在測驗ChatGPT的關於評分的效度與信度,而我在做的有點像是在跑流程產生數據;最後怡晴則是介紹同理心技巧評估GPT,雖說對於這方面不熟,但提及ChatGPT對於多種對話情境辨識困難時,想到如果ChatGPT哪天對這方面再無障礙時,或許就真的具備人的性質。事後閱讀演講逐字稿,看到裡面一些指令,比如:請協助彙整二檔案內容,請重點摘要內容,必要時舉例說之。以利未參與者可快速理解內容。或許未來整理逐字稿時也可用到
  4. 黃仁勳臺大演講:6/2晚間時輝達執行長黃仁勳將在台大演講「AI如何帶動全球新產業革命發展」,雖說與目前任務無關,但之後有空還是想看翻譯內容,聽聽走在前沿的人如何描述可能的未來。(而且那在我家附近,真應該去體育館外圍晃晃)

  8/5~8/16 任務與心得  第81、最後一周 任務與進展 短期任務 玉里收案(應用於思覺失調症患者之人工智慧認知評估系統之發展及驗證): →完成收案人數:新增2人,目前共完成43人  →收案進行中人數:0人 →資料備份:已完成雲端上傳 資料連結:https://drive...