#medicineeasy

2026-07-01
JC Wung 09:47:18
如果時間、空間、量能可以配合,甘蔗汁小隊每一位成員都能分享嗎?

還是有指定成員呢?
@sandrahtlin
目前還不知道會跟哪些單位合作,所以有可能根本不在北部(是說,大家都在哪裡?)
到時候會是一個4小時的工作坊,每場活動看情況想安排一至二個案例分享 。
不曉得能不能先找個機會,跟大家聊聊呢?如果不叨擾的話,我看7/12晚上有個線上小聚!感覺上要是知道大家的背景跟在乎的事情,到時候可以更準確的邀約分享~
alix2t7 11:10:07
先說我的三個關鍵字:音樂學院畢、近期考取 iPas AI應用初階、文史哲愛好者。

在小隊裡主要負責AI應用開發的部分。

我們的主要集散地是台北;7/12 我的班表到八點。

其實也會挺想聽聽不同場域在導入AI時遇上的境況…🤔

前陣子有看到數發部的AI公務人才規劃。也是相當好奇目前台灣公務體係的適應情況。

JC Wung 12:22:03
歡迎來到甘蔗汁會議
想問15分鐘足夠 @sandrahtlin 說明邀請規劃呢?
謝謝☺️
夠的夠的,我到時後盡量簡短!那就到時見囉~
2026-07-04
Yu Chiang 16:11:21
@jcwung.pharm2021 請問 JC 1 2 4 6 分別代表什麼意思?
如果需要我們要想想怎麼轉成介面,方便後續資料分析
JC Wung 20:19:51
上面兩個圖 (7/4 4:22pm) 是我想表達的意思,謝謝YU

「覆核 output」的代表意義在資料夾[02. AI Model Training]->[01. Phase01_RAG_building]->[202606 v7.1 人工覆核專用表]。裡面5個檔案的最後一欄有評分定義。

由於完成人類評估後,會交給統計專家進行分析。[202606 v7.1 人工覆核專用表]內的格式已經跟統計專家確認,也會以這樣的格式給統計專家,所以需要把資料匯入這5個檔案的對應欄位喔,謝謝。

@alix2t7 @annie84080 請兩位再確認一下唷:heart_hands:
2026-07-06
Yu Chiang 22:12:35
(是因為擔心公開資料所以大家都不直接貼 google drive link 嗎XD)
Yu Chiang 22:13:07
Claude 評分定義

正確=1:XML 仿單中有的資訊,有適當出現
不正確=2:XML 仿單中有的資訊,不適當出現
遺漏=3:重要資訊沒出現
幻覺=4:出現 XML 仿單完全沒有的資訊(編造或張冠李戴,例如假藥名、錯劑型操作)
仿單未記載之醫藥常識=5:仿單未寫,但屬合理通用醫藥/衛生建議(例如「滴藥後閉眼1-2分鐘」、「不要丟馬桶」等)
未收斂重複截斷=6:答案因達 1024 token 上限被截斷,且撞頂原因為未收斂之自我重複(末句或語段反覆累述直到被截)

【填寫規則】
若一回答含多種情況,請填入所有出現的數字,以空格分隔(例如 1 3 5 表示同時有正確、遺漏與醫藥常識);同類別出現多次只記一次。最後藥師需人工核對一次。

【4 vs 5 區分】4=錯誤/編造;5=仿單沒寫但合理。
【仿單未涵蓋的題目】例如本研究中部分眼藥仿單未含「妥善丟棄」指引,模型給的丟棄建議全數歸入 4 或 5(不視為遺漏 3)。
【6 的使用】6 與內容類別可並存:截斷點之前已正確/遺漏等內容仍照 1-5 標記,6 僅額外標記「此題因未收斂自我重複而截斷」。僅當撞頂主因為自我重複時給 6;若內容持續推進(非重複)才被截,則不給 6。

註:B 工作表示意行為舊版單一標籤示範,可忽略。
2026-07-07
JC Wung 08:59:31
謝謝YU,本週我們可以找時間試用,如果順利,可以在7/13正式開始為期30天的人類評估。

當初沒有考慮checkbox的考量: 因為地球上做這件事的人或團隊不多,連甘蔗汁小隊的評分也因遇到不預期的情境,從1-4擴展到1-6。未來不知道是否再次遇到無法歸類的案件,所以保留彈性,讓評分者自己輸入,以利機動增加評分定義。(就是保持彈性的意思啦 哈哈:slightly_smiling_face:)

後續如果遇到無法歸類與評分的案子,我再找其他替代方案即可。現在做的已經很棒,我們要盡快進入人類評估。
@annie84080 @alix2t7
Yu Chiang 09:00:26
我有留一個評分原因可以填寫
2026-07-10
alix2t7 13:24:18
嗨~大家,姍姍來遲,僅此致歉。

@annie84080 妳的直覺沒錯~看完JC解釋後,也發現沒有我想像的複雜。第一階段 應可先用google sheet處理就好。

然後我覺得勾選盒對第二階論文可能是很棒的方式,但在第一階論文,因爲人工複選的結果,要再交給統計專家處理。

然後我記得勾選產出的格式,很像就不是數字串了?

這部份可能我先跟JC確認下對方希望的交接格式。確認了,再決定用勾選或填數字會比較好~🙏🏻
Yu Chiang 23:04:14
@alix2t7 你可以用AI幫我把產出的12個答案打散,重新整理一份試算表嗎?
我怕我用 AI 做的 mapping table 不準確(另外原因是.. 我之前才用了一天 Claude 付費版就被封鎖了,還沒解決)
這樣我可以再把整理後的試算表,放到這個 html 上,方便受測者閱讀

另外,我想也不要在網站裡串表單了,我再提供受測者好填寫的 google 表單,可以讓網站和表單搭配使用

抱歉最近工作比較忙,想說用這個方式讓 JC 可以進入測試階段
2026-07-11
fly 14:38:17
@leo424y has joined the channel
JC Wung 17:56:15
7/12 (日) 8pm 甘蔗汁會議

大家好

7/12 (日) 晚上8-9點半是甘蔗汁會議,歡迎頻道的每一位朋友一起來榨甘蔗汁。
有想分享或討論的事,可以先回覆本訊息,方便 Ann 安排會議喔,謝謝☺️

p.s. 麻煩 Wei 揪好友參加唷
@imtinahsieh @annie84080 @alix2t7 @yomokan1991 @yu850709 @kuanwei.dev @sandrahtlin

甘蔗汁會議
7月12日 星期日 · 下午8時 - 9:30
如何加入 Google Meet 會議
視訊通話連結:meet.google.com/jte-mnzi-btw
或撥打下列電話號碼:<tel:+14438775592|+1 443-877-5592> PIN 碼:808199342
我這邊想討論的事
1. IRB
2. 開放文教基金會標案說明: 15 min @sandrahtlin
再請Ann協助議程安排唷 感謝 @imtinahsieh
我這邊則是希望討論:


1. 一階論文使用的 人工覆核UI 表格確認;昨天有與JC對了下,想說會議YU也在時,我們三人拍板一下。
2. PR資料夾的部分,因爲與此次數發部公文事件有連動到;想說我們會有需要討論哪些東西適合放進去。
颱風影響到我週末行程,到時候可能剛好在移動的路上,不曉得能不能讓我當第一個議程,先跟大家快速分享呢?(到時候可能是從戶外參與,背景可能有點吵先道歉🤓)
Human testing console
papachiang.github.io/medicineeasy_official/survey.html?drug=%E4%BB%A5%E5%88%A9%E…&q=1
搭配表單
forms.gle/…
cc @jcwung.pharm2021 @alix2t7 可以先看看
Meeting Minutes 已上傳:hackmd.io/@sugarcane/…
Agenda:
@sandrahtlin 開放文教基金會標案說明(放最前面)
@alix2t7 @annie84080 期刊一進度
@jcwung.pharm2021 IRB
@yu850709 Brand visual brainstorming(30min)
@alix2t7 GitHub repo / PR 公開資訊管理
若有遺漏可再補充~
@imtinahsieh @sandrahtlin 開放文教基金會一案可否放IRB後講?JC有些重要的事需要與SL溝通,我需在場。且我八點才下班,怕趕不上~🙏🏻

或是,將IRB拉到第一個議題,很像也可以?
好低 那 IRB 放最前面~
然後PR資訊的部分,與開放文教一案有些許關聯,能否放在那後面討論?
是開放文化基金會XD
往後排沒問題,那我可能也剛好可以晚一點點上線,晚點聊~
yomokan1991 2026-07-12 20:08:17
我等等上線,我的密碼怪怪的
@annie84080 @alix2t7
1. 完整做完一個藥「內舒拿」(5 QA*12組),進度1/30,使用過程流暢。
2. 請嘗試整合到統計專家需要的表單格式唷。
3. 想問[測試資料網站]放在github有哪些考量呢? 由於醫院連不進去,無法利用空檔做,就得連續30天晚上熬夜QQ
4. 在github有設定權限嗎?
以上,謝謝:slightly_smiling_face:
@jcwung.pharm2021 醫院的電腦還有哪些限制?

是否能像之前YU給的,打包成一個資料夾,下載後在本地做——給 @annie84080 參考。
@alix2t7 @annie84080
先讓我跟資訊室溝通一下,也許只需要改設定。
昨天評分過程流暢,喜歡💕這邊等醫院無法調整再考慮調整,謝謝☺️
@alix2t7 @annie84080
1. 發現藥品覆核結果格式有誤,錯誤類型:輸入3個評分類別,例如[4 5 6],會自動轉換成[2004 5 6],且無法手動更正。有問題的欄位用黃色底標註,有G12, M7, S2, S10, Y2, AE9, AE12, BI3, BI7, BI8, BI10.
2. 請確認衛署藥輸字第025921號的XML檔,在13 包裝及儲存,有無格式錯誤。(人類的大膽假設,希望小心求證)
3. 進度2/30
1. 我這邊也有發現這錯誤。🙏🏻
2. 025921的PDF與XML 13包裝儲存都有內容,給RAG用轉換過的md檔裡內容也都正確無誤。能否直接將有問題的地方截個圖給我,我查看看可能是什麼原因?
3. 辛苦了~~~~
Q3 如何清潔與保存,對照衛署藥輸字第025921號仿單,答案在13 包裝及儲存->
13.2 效期 3年 容器開封後28天內、13.3 儲存條件存放環境請勿超過25°C

人類評分完,檢查表格發現,有加RAG組居然沒有抓到。跟第1個評分體感差很多,懷疑是不是XML格式有瑕疵呢?
@alix2t7
所以RAG系統會失敗,通常不出兩個原因:

1. 分類沒做好:也就是說,把小說放財經架上,雜誌放科普架上——圖書館員高高興興的依編號拿出架上的書,但給出的書根本沒用——與問題無關。
2. 答案本來就沒上架:一開始拿來收藏的書,有好好安放。但要問的問題,書裡就是沒有寫。
我們遇到的情況,既然書(XML、MD)上都有答案,所以一開始我猜可能是第一類原因。

但後來要Claude跑了次測試後,實情是這樣:


1. 一階論文我使用的RAG,是最陽春的裝配。所以025921所有13個章節的圖書編號(角度&距離)差距極小。0.001的差距,就會從正確變不正確或反之。
兩者微小的語意差距,讓圖書館員查書時,剛剛好將025921的13章爬除在外。所以模型其實沒從圖書館員(=RAG)這邊,拿到13張的資訊,自然只能回答
換個角度想:與沒有RAG的02591答案相比,當RAG沒有給出正確資訊時,模型會乖乖回答「沒記載」而不是自己開始掰,其實更強化了使用RAG的重要性~:)

之前與大家分享過的新開發計畫,宗旨就是不只強化RAG,也強化整個藏書(仿單)入庫、檢索系統的精準度與正確度。

JC妳的回報,其實說明了我們正往正確的方向前進~🙏🏻

之後有其他問題,再請不吝大膽猜測;這即是Human-in-the-loop及專業藥師最珍貴之處。
回到紀錄表單評分的資料問題;

• 再請 @annie84080 調查一下填答的「200」是怎麼出現的… 現在看起來很像是填到三個數字,就會出現「200」。BO2我填了6個數字,沒有出現200。
• 建議「藥品覆核結果」中可以不用放answers。因為隨著JC評完的越來越多,這些answers會累積成幾萬過十萬字的記憶體大食獸… 不是一個很理想,可便捷處理的檔案。
@alix2t7 @annie84080
1. 藥品覆核結果格式有誤,錯誤類型:輸入3個評分類別,例如[4 5 6],會自動轉換成[2004 5 6],且無法手動更正。有問題的欄位持續用黃色底標註。
2. 藥品覆核結果格式不一致:輸入4個評分以上的類別,例如[1 2 3 6],會變成靠左對齊,其他的都是靠右對齊。
3. 後續我們可以將評分3類型做分析,除了向量座標偏誤 (衛署藥輸字第025921號仿單) 這種類型,是否還有其他類型。解決方案除了可以強化RAG,是否可以更統一仿單用語呢? (仿單真的不好閱讀,很硬的甘蔗)。
4. 進度3/30 (10%)
回3.:仿單用語的轉譯、編碼、解碼精準度我這邊已在做。但不建議以「統一」的方式處理。

一則是因爲決定如何統一的是食藥署,二則是落地場域會被問的方式(我猜)本就千變萬化。我有些看不出統一的好處…

還是我其實沒抓到JC說得 統一 是什麼意思?
@alix2t7 @annie84080
1. 想新增評分類別7: 動作順序錯誤。已在藥品覆核結果調整
建議JC可以有新的發現會需求,再寫下來並標註我們,好把心力與專注放在評分上呦~:)
@imtinahsieh @jcwung.pharm2021 與兩位回報一下~

目前新系統開發已進入到實際部署模型,跑測試的階段。預計這週內會找時間上RunPod租GPU;

預計也是一週內會把上次Gemma 4重跑(10 USD)及這次跑測試的費用(10 USD),收據上傳雲端。屆時再麻煩妳們了~
Google Sheet 收到 `2001 2 4` 的原因:Apps Script 把 `"1 2 4"` 寫入儲存格時,Google Sheets 自動把它解讀成日期(2001年2月4日 → `2001 2 4`)。

正在修

統計不是用程式 array 的格式,真神奇
或許是G Sheet預設的格式 自動偵測 模式?
我要求救 Wei 幫忙了,已私訊!
好的。我現在來看看

@annie84080 也盡快檢查;我這邊會先逆向工程看看問題可能在哪?有沒有更快的解決方案
剛剛有看過,是App Scripts有小bug。已將修過的程式碼送給YU。再麻煩YU上線&測試功能是否正常運作了~
@jcwung.pharm2021 就直接用電腦開 html 吧
不要用 github 的頁面了
我想說 JC 上班不能用 github,就沒有維護 github

感謝 @alix2t7 幫修,可以直接把兩份檔案再次打包,傳給 JC 就好
結果應該是我要刪除 google sheet 欄位,不小心用了隱藏欄位造成的

已經把欄位整理好,過去的覆核結果也已對應
之前格式錯誤(黃框)也已修正
docs.google.com/spreadsheets/d/1LLahV4lwXi-…/edit?gid=0#gid=0

不好意思造成困擾

後續可以用原本的 html 檔案操作
也可以用 papachiang.github.io/medicineeasy_official 操作
剛測試正常!👍🏻:heart_hands:🏻
感謝YU和Wei,使用順暢👍

Memo
1. 後續我們可以將評分3類型做分析,除了檢索系統不盡完善 (衛署藥輸字第025921號仿單) 這種類型,是否還有其他類型: 是。可思考檢索系統不完善的解決方案。
2. 很好奇為什麼會出現外國語: 韓文、波蘭語
3. 進度7/30 (7/20)
關於2.:首要原因是我們選用的都是小(參數)模型——模型能瘦下來,但還能像大模型般正常運作,靠得是把不同語言折疊再折疊,收納進更小的空間內。

所以當我們在問他藥劑這種高度專業且複雜的問題時,他在腦中思考時就會不自覺的換上另一個語言回答,無法有效的維持在一種語言上。因爲語言跟語言間的距離被壓縮,跑起來更容易偏掉。

有點類似我們在講不甚熟稔的第二外語時,會不小心又用上另一個不熟的第三外語一樣。

模型小的第二個特色是,他的注意力沒辦法像更大的保持的那麼好。所以在思考維度複雜的問題,也是同樣更容易跑偏。

至於爲什麼是波蘭文與韓文… 這問題我猜可能要用上Claude最新發明的LLM潛意識挖掘技巧,才能回答了😂😂😂
JC Wung 17:56:15
7/12 (日) 8pm 甘蔗汁會議

大家好

7/12 (日) 晚上8-9點半是甘蔗汁會議,歡迎頻道的每一位朋友一起來榨甘蔗汁。
有想分享或討論的事,可以先回覆本訊息,方便 Ann 安排會議喔,謝謝☺️

p.s. 麻煩 Wei 揪好友參加唷
@imtinahsieh @annie84080 @alix2t7 @yomokan1991 @yu850709 @kuanwei.dev @sandrahtlin

甘蔗汁會議
7月12日 星期日 · 下午8時 - 9:30
如何加入 Google Meet 會議
視訊通話連結:meet.google.com/jte-mnzi-btw
或撥打下列電話號碼:<tel:+14438775592|+1 443-877-5592> PIN 碼:808199342
meet.google.com
Real-time meetings by Google. Using your browser, share your video, desktop, and presentations with teammates and customers.
  • 🙌2
  • 1
  • 💡1
我這邊想討論的事
1. IRB
2. 開放文教基金會標案說明: 15 min @sandrahtlin
再請Ann協助議程安排唷 感謝 @imtinahsieh
我這邊則是希望討論:


1. 一階論文使用的 人工覆核UI 表格確認;昨天有與JC對了下,想說會議YU也在時,我們三人拍板一下。
2. PR資料夾的部分,因爲與此次數發部公文事件有連動到;想說我們會有需要討論哪些東西適合放進去。
颱風影響到我週末行程,到時候可能剛好在移動的路上,不曉得能不能讓我當第一個議程,先跟大家快速分享呢?(到時候可能是從戶外參與,背景可能有點吵先道歉🤓)
Human testing console
papachiang.github.io/medicineeasy_official/survey.html?drug=%E4%BB%A5%E5%88%A9%E…&q=1
搭配表單
forms.gle/…
cc @jcwung.pharm2021 @alix2t7 可以先看看
Meeting Minutes 已上傳:hackmd.io/@sugarcane/…
Agenda:
@sandrahtlin 開放文教基金會標案說明(放最前面)
@alix2t7 @annie84080 期刊一進度
@jcwung.pharm2021 IRB
@yu850709 Brand visual brainstorming(30min)
@alix2t7 GitHub repo / PR 公開資訊管理
若有遺漏可再補充~
@imtinahsieh @sandrahtlin 開放文教基金會一案可否放IRB後講?JC有些重要的事需要與SL溝通,我需在場。且我八點才下班,怕趕不上~🙏🏻

或是,將IRB拉到第一個議題,很像也可以?
好低 那 IRB 放最前面~
然後PR資訊的部分,與開放文教一案有些許關聯,能否放在那後面討論?
是開放文化基金會XD
往後排沒問題,那我可能也剛好可以晚一點點上線,晚點聊~
yomokan1991 2026-07-12 20:08:17
我等等上線,我的密碼怪怪的
@annie84080 @alix2t7
1. 完整做完一個藥「內舒拿」(5 QA*12組),進度1/30,使用過程流暢。
2. 請嘗試整合到統計專家需要的表單格式唷。
3. 想問[測試資料網站]放在github有哪些考量呢? 由於醫院連不進去,無法利用空檔做,就得連續30天晚上熬夜QQ
4. 在github有設定權限嗎?
以上,謝謝:slightly_smiling_face:
@jcwung.pharm2021 醫院的電腦還有哪些限制?

是否能像之前YU給的,打包成一個資料夾,下載後在本地做——給 @annie84080 參考。
@alix2t7 @annie84080
先讓我跟資訊室溝通一下,也許只需要改設定。
昨天評分過程流暢,喜歡💕這邊等醫院無法調整再考慮調整,謝謝☺️
@alix2t7 @annie84080
1. 發現藥品覆核結果格式有誤,錯誤類型:輸入3個評分類別,例如[4 5 6],會自動轉換成[2004 5 6],且無法手動更正。有問題的欄位用黃色底標註,有G12, M7, S2, S10, Y2, AE9, AE12, BI3, BI7, BI8, BI10.
2. 請確認衛署藥輸字第025921號的XML檔,在13 包裝及儲存,有無格式錯誤。(人類的大膽假設,希望小心求證)
3. 進度2/30
1. 我這邊也有發現這錯誤。🙏🏻
2. 025921的PDF與XML 13包裝儲存都有內容,給RAG用轉換過的md檔裡內容也都正確無誤。能否直接將有問題的地方截個圖給我,我查看看可能是什麼原因?
3. 辛苦了~~~~
Q3 如何清潔與保存,對照衛署藥輸字第025921號仿單,答案在13 包裝及儲存->
13.2 效期 3年 容器開封後28天內、13.3 儲存條件存放環境請勿超過25°C

人類評分完,檢查表格發現,有加RAG組居然沒有抓到。跟第1個評分體感差很多,懷疑是不是XML格式有瑕疵呢?
@alix2t7
所以RAG系統會失敗,通常不出兩個原因:

1. 分類沒做好:也就是說,把小說放財經架上,雜誌放科普架上——圖書館員高高興興的依編號拿出架上的書,但給出的書根本沒用——與問題無關。
2. 答案本來就沒上架:一開始拿來收藏的書,有好好安放。但要問的問題,書裡就是沒有寫。
我們遇到的情況,既然書(XML、MD)上都有答案,所以一開始我猜可能是第一類原因。

但後來要Claude跑了次測試後,實情是這樣:


1. 一階論文我使用的RAG,是最陽春的裝配。所以025921所有13個章節的圖書編號(角度&距離)差距極小。0.001的差距,就會從正確變不正確或反之。
兩者微小的語意差距,讓圖書館員查書時,剛剛好將025921的13章爬除在外。所以模型其實沒從圖書館員(=RAG)這邊,拿到13張的資訊,自然只能回答
換個角度想:與沒有RAG的02591答案相比,當RAG沒有給出正確資訊時,模型會乖乖回答「沒記載」而不是自己開始掰,其實更強化了使用RAG的重要性~:)

之前與大家分享過的新開發計畫,宗旨就是不只強化RAG,也強化整個藏書(仿單)入庫、檢索系統的精準度與正確度。

JC妳的回報,其實說明了我們正往正確的方向前進~🙏🏻

之後有其他問題,再請不吝大膽猜測;這即是Human-in-the-loop及專業藥師最珍貴之處。
回到紀錄表單評分的資料問題;

• 再請 @annie84080 調查一下填答的「200」是怎麼出現的… 現在看起來很像是填到三個數字,就會出現「200」。BO2我填了6個數字,沒有出現200。
• 建議「藥品覆核結果」中可以不用放answers。因為隨著JC評完的越來越多,這些answers會累積成幾萬過十萬字的記憶體大食獸… 不是一個很理想,可便捷處理的檔案。
@alix2t7 @annie84080
1. 藥品覆核結果格式有誤,錯誤類型:輸入3個評分類別,例如[4 5 6],會自動轉換成[2004 5 6],且無法手動更正。有問題的欄位持續用黃色底標註。
2. 藥品覆核結果格式不一致:輸入4個評分以上的類別,例如[1 2 3 6],會變成靠左對齊,其他的都是靠右對齊。
3. 後續我們可以將評分3類型做分析,除了向量座標偏誤 (衛署藥輸字第025921號仿單) 這種類型,是否還有其他類型。解決方案除了可以強化RAG,是否可以更統一仿單用語呢? (仿單真的不好閱讀,很硬的甘蔗)。
4. 進度3/30 (10%)
回3.:仿單用語的轉譯、編碼、解碼精準度我這邊已在做。但不建議以「統一」的方式處理。

一則是因爲決定如何統一的是食藥署,二則是落地場域會被問的方式(我猜)本就千變萬化。我有些看不出統一的好處…

還是我其實沒抓到JC說得 統一 是什麼意思?
@alix2t7 @annie84080
1. 想新增評分類別7: 動作順序錯誤。已在藥品覆核結果調整
建議JC可以有新的發現會需求,再寫下來並標註我們,好把心力與專注放在評分上呦~:)
@imtinahsieh @jcwung.pharm2021 與兩位回報一下~

目前新系統開發已進入到實際部署模型,跑測試的階段。預計這週內會找時間上RunPod租GPU;

預計也是一週內會把上次Gemma 4重跑(10 USD)及這次跑測試的費用(10 USD),收據上傳雲端。屆時再麻煩妳們了~
Google Sheet 收到 `2001 2 4` 的原因:Apps Script 把 `"1 2 4"` 寫入儲存格時,Google Sheets 自動把它解讀成日期(2001年2月4日 → `2001 2 4`)。

正在修

統計不是用程式 array 的格式,真神奇
或許是G Sheet預設的格式 自動偵測 模式?
我要求救 Wei 幫忙了,已私訊!
好的。我現在來看看

@annie84080 也盡快檢查;我這邊會先逆向工程看看問題可能在哪?有沒有更快的解決方案
剛剛有看過,是App Scripts有小bug。已將修過的程式碼送給YU。再麻煩YU上線&測試功能是否正常運作了~
@jcwung.pharm2021 就直接用電腦開 html 吧
不要用 github 的頁面了
我想說 JC 上班不能用 github,就沒有維護 github

感謝 @alix2t7 幫修,可以直接把兩份檔案再次打包,傳給 JC 就好
結果應該是我要刪除 google sheet 欄位,不小心用了隱藏欄位造成的

已經把欄位整理好,過去的覆核結果也已對應
之前格式錯誤(黃框)也已修正
docs.google.com/spreadsheets/d/1LLahV4lwXi-…/edit?gid=0#gid=0

不好意思造成困擾

後續可以用原本的 html 檔案操作
也可以用 papachiang.github.io/medicineeasy_official 操作
剛測試正常!👍🏻:heart_hands:🏻
感謝YU和Wei,使用順暢👍

Memo
1. 後續我們可以將評分3類型做分析,除了檢索系統不盡完善 (衛署藥輸字第025921號仿單) 這種類型,是否還有其他類型: 是。可思考檢索系統不完善的解決方案。
2. 很好奇為什麼會出現外國語: 韓文、波蘭語
3. 進度7/30 (7/20)
關於2.:首要原因是我們選用的都是小(參數)模型——模型能瘦下來,但還能像大模型般正常運作,靠得是把不同語言折疊再折疊,收納進更小的空間內。

所以當我們在問他藥劑這種高度專業且複雜的問題時,他在腦中思考時就會不自覺的換上另一個語言回答,無法有效的維持在一種語言上。因爲語言跟語言間的距離被壓縮,跑起來更容易偏掉。

有點類似我們在講不甚熟稔的第二外語時,會不小心又用上另一個不熟的第三外語一樣。

模型小的第二個特色是,他的注意力沒辦法像更大的保持的那麼好。所以在思考維度複雜的問題,也是同樣更容易跑偏。

至於爲什麼是波蘭文與韓文… 這問題我猜可能要用上Claude最新發明的LLM潛意識挖掘技巧,才能回答了😂😂😂
JC Wung 18:03:41
我這邊想討論的事
1. IRB
2. 開放文教基金會標案說明: 15 min @sandrahtlin
再請Ann協助議程安排唷 感謝 @imtinahsieh
alix2t7 18:29:47
我這邊則是希望討論:


1. 一階論文使用的 人工覆核UI 表格確認;昨天有與JC對了下,想說會議YU也在時,我們三人拍板一下。
2. PR資料夾的部分,因爲與此次數發部公文事件有連動到;想說我們會有需要討論哪些東西適合放進去。
颱風影響到我週末行程,到時候可能剛好在移動的路上,不曉得能不能讓我當第一個議程,先跟大家快速分享呢?(到時候可能是從戶外參與,背景可能有點吵先道歉🤓)
2026-07-12
Yu Chiang 00:57:31
Human testing console
papachiang.github.io/medicineeasy_official/survey.html?drug=%E4%BB%A5%E5%88%A9%E…&q=1
搭配表單
forms.gle/…
cc @jcwung.pharm2021 @alix2t7 可以先看看
Ann 14:18:17
看了一下 Sandra 的自介跟關鍵字 我們可能曾經一起吃過飯 XD
Ann 14:28:52
Meeting Minutes 已上傳:hackmd.io/@sugarcane/…
Agenda:
@sandrahtlin 開放文教基金會標案說明(放最前面)
@alix2t7 @annie84080 期刊一進度
@jcwung.pharm2021 IRB
@yu850709 Brand visual brainstorming(30min)
@alix2t7 GitHub repo / PR 公開資訊管理
若有遺漏可再補充~
alix2t7 17:35:44
@imtinahsieh @sandrahtlin 開放文教基金會一案可否放IRB後講?JC有些重要的事需要與SL溝通,我需在場。且我八點才下班,怕趕不上~🙏🏻

或是,將IRB拉到第一個議題,很像也可以?
Ann 17:36:26
好低 那 IRB 放最前面~
alix2t7 17:36:50
然後PR資訊的部分,與開放文教一案有些許關聯,能否放在那後面討論?
是開放文化基金會XD
往後排沒問題,那我可能也剛好可以晚一點點上線,晚點聊~
yomokan1991 20:08:17
我等等上線,我的密碼怪怪的
2026-07-13
JC Wung 23:41:45
@annie84080 @alix2t7
1. 完整做完一個藥「內舒拿」(5 QA*12組),進度1/30,使用過程流暢。
2. 請嘗試整合到統計專家需要的表單格式唷。
3. 想問[測試資料網站]放在github有哪些考量呢? 由於醫院連不進去,無法利用空檔做,就得連續30天晚上熬夜QQ
4. 在github有設定權限嗎?
以上,謝謝:slightly_smiling_face:
2026-07-14
alix2t7 00:02:36
@jcwung.pharm2021 醫院的電腦還有哪些限制?

是否能像之前YU給的,打包成一個資料夾,下載後在本地做——給 @annie84080 參考。
JC Wung 07:57:05
@alix2t7 @annie84080
先讓我跟資訊室溝通一下,也許只需要改設定。
昨天評分過程流暢,喜歡💕這邊等醫院無法調整再考慮調整,謝謝☺️
alix2t7 16:13:59
連arXiv都被發現有重大個資外洩風險了…😃😅

到時我們一定要好好檢查🙏🏻
https://infosecu.technews.tw/2026/07/13/arxiv-submissions-security-crisis-90-files-contain-sensitive-info-passwords-gps-coordinates/
  • 😳2
  • 😮1
alix2t7 16:13:59
連arXiv都被發現有重大個資外洩風險了…😃😅

到時我們一定要好好檢查🙏🏻
https://infosecu.technews.tw/2026/07/13/arxiv-submissions-security-crisis-90-files-contain-sensitive-info-passwords-gps-coordinates/
2026-07-15
JC Wung 00:05:23
@alix2t7 @annie84080
1. 發現藥品覆核結果格式有誤,錯誤類型:輸入3個評分類別,例如[4 5 6],會自動轉換成[2004 5 6],且無法手動更正。有問題的欄位用黃色底標註,有G12, M7, S2, S10, Y2, AE9, AE12, BI3, BI7, BI8, BI10.
2. 請確認衛署藥輸字第025921號的XML檔,在13 包裝及儲存,有無格式錯誤。(人類的大膽假設,希望小心求證)
3. 進度2/30
alix2t7 00:26:39
1. 我這邊也有發現這錯誤。🙏🏻
2. 025921的PDF與XML 13包裝儲存都有內容,給RAG用轉換過的md檔裡內容也都正確無誤。能否直接將有問題的地方截個圖給我,我查看看可能是什麼原因?
3. 辛苦了~~~~
JC Wung 10:20:53
Q3 如何清潔與保存,對照衛署藥輸字第025921號仿單,答案在13 包裝及儲存->
13.2 效期 3年 容器開封後28天內、13.3 儲存條件存放環境請勿超過25°C

人類評分完,檢查表格發現,有加RAG組居然沒有抓到。跟第1個評分體感差很多,懷疑是不是XML格式有瑕疵呢?
@alix2t7
alix2t7 18:11:44
所以RAG系統會失敗,通常不出兩個原因:

1. 分類沒做好:也就是說,把小說放財經架上,雜誌放科普架上——圖書館員高高興興的依編號拿出架上的書,但給出的書根本沒用——與問題無關。
2. 答案本來就沒上架:一開始拿來收藏的書,有好好安放。但要問的問題,書裡就是沒有寫。
我們遇到的情況,既然書(XML、MD)上都有答案,所以一開始我猜可能是第一類原因。

但後來要Claude跑了次測試後,實情是這樣:


1. 一階論文我使用的RAG,是最陽春的裝配。所以025921所有13個章節的圖書編號(角度&距離)差距極小。0.001的差距,就會從正確變不正確或反之。
兩者微小的語意差距,讓圖書館員查書時,剛剛好將025921的13章爬除在外。所以模型其實沒從圖書館員(=RAG)這邊,拿到13張的資訊,自然只能回答
alix2t7 18:20:06
換個角度想:與沒有RAG的02591答案相比,當RAG沒有給出正確資訊時,模型會乖乖回答「沒記載」而不是自己開始掰,其實更強化了使用RAG的重要性~:)

之前與大家分享過的新開發計畫,宗旨就是不只強化RAG,也強化整個藏書(仿單)入庫、檢索系統的精準度與正確度。

JC妳的回報,其實說明了我們正往正確的方向前進~🙏🏻

之後有其他問題,再請不吝大膽猜測;這即是Human-in-the-loop及專業藥師最珍貴之處。
alix2t7 18:27:51
回到紀錄表單評分的資料問題;

• 再請 @annie84080 調查一下填答的「200」是怎麼出現的… 現在看起來很像是填到三個數字,就會出現「200」。BO2我填了6個數字,沒有出現200。
• 建議「藥品覆核結果」中可以不用放answers。因為隨著JC評完的越來越多,這些answers會累積成幾萬過十萬字的記憶體大食獸… 不是一個很理想,可便捷處理的檔案。
2026-07-16
JC Wung 00:05:45
@alix2t7 @annie84080
1. 藥品覆核結果格式有誤,錯誤類型:輸入3個評分類別,例如[4 5 6],會自動轉換成[2004 5 6],且無法手動更正。有問題的欄位持續用黃色底標註。
2. 藥品覆核結果格式不一致:輸入4個評分以上的類別,例如[1 2 3 6],會變成靠左對齊,其他的都是靠右對齊。
3. 後續我們可以將評分3類型做分析,除了向量座標偏誤 (衛署藥輸字第025921號仿單) 這種類型,是否還有其他類型。解決方案除了可以強化RAG,是否可以更統一仿單用語呢? (仿單真的不好閱讀,很硬的甘蔗)。
4. 進度3/30 (10%)
alix2t7 10:36:11
亞東醫院已將AI系統導入病歷摘要、診前問診、護理紀錄等耗時卻必要的面向。

我猜他們應是深耕許久,各種紀錄的數位化(aka 後端儲存)都有校準、整理,AI導入才可以那麼快。

https://www.cna.com.tw/news/afe/202607110059.aspx?utm_source=line&utm_medium=image&utm_campaign=line_image
中央社 CNA
在醫院生死交關第一線,一場無聲的「溫暖革命」正悄悄展開。一名年輕護理師拉張椅子坐在病床旁,語氣輕柔地與病患阿嬤聊天,道聲晚安後才熄燈離開。正因為這樣的片刻,冰冷的醫院走廊多了人情味。
  • 👍3
alix2t7 10:36:11
亞東醫院已將AI系統導入病歷摘要、診前問診、護理紀錄等耗時卻必要的面向。

我猜他們應是深耕許久,各種紀錄的數位化(aka 後端儲存)都有校準、整理,AI導入才可以那麼快。

https://www.cna.com.tw/news/afe/202607110059.aspx?utm_source=line&utm_medium=image&utm_campaign=line_image
alix2t7 10:43:51
回3.:仿單用語的轉譯、編碼、解碼精準度我這邊已在做。但不建議以「統一」的方式處理。

一則是因爲決定如何統一的是食藥署,二則是落地場域會被問的方式(我猜)本就千變萬化。我有些看不出統一的好處…

還是我其實沒抓到JC說得 統一 是什麼意思?
2026-07-17
JC Wung 00:46:53
@alix2t7 @annie84080
1. 想新增評分類別7: 動作順序錯誤。已在藥品覆核結果調整
alix2t7 09:27:51
建議JC可以有新的發現會需求,再寫下來並標註我們,好把心力與專注放在評分上呦~:)
2026-07-18
alix2t7 21:45:42
@imtinahsieh @jcwung.pharm2021 與兩位回報一下~

目前新系統開發已進入到實際部署模型,跑測試的階段。預計這週內會找時間上RunPod租GPU;

預計也是一週內會把上次Gemma 4重跑(10 USD)及這次跑測試的費用(10 USD),收據上傳雲端。屆時再麻煩妳們了~
2026-07-19
Yu Chiang 10:28:15
Google Sheet 收到 `2001 2 4` 的原因:Apps Script 把 `"1 2 4"` 寫入儲存格時,Google Sheets 自動把它解讀成日期(2001年2月4日 → `2001 2 4`)。

正在修

統計不是用程式 array 的格式,真神奇
alix2t7 10:35:27
或許是G Sheet預設的格式 自動偵測 模式?
Yu Chiang 10:52:14
我要求救 Wei 幫忙了,已私訊!
alix2t7 21:10:31
好的。我現在來看看

@annie84080 也盡快檢查;我這邊會先逆向工程看看問題可能在哪?有沒有更快的解決方案
alix2t7 22:26:07
剛剛有看過,是App Scripts有小bug。已將修過的程式碼送給YU。再麻煩YU上線&測試功能是否正常運作了~
Yu Chiang 23:24:27
@jcwung.pharm2021 就直接用電腦開 html 吧
不要用 github 的頁面了
我想說 JC 上班不能用 github,就沒有維護 github

感謝 @alix2t7 幫修,可以直接把兩份檔案再次打包,傳給 JC 就好
2026-07-20
Yu Chiang 00:03:39
結果應該是我要刪除 google sheet 欄位,不小心用了隱藏欄位造成的

已經把欄位整理好,過去的覆核結果也已對應
之前格式錯誤(黃框)也已修正
docs.google.com/spreadsheets/d/1LLahV4lwXi-…/edit?gid=0#gid=0

不好意思造成困擾

後續可以用原本的 html 檔案操作
也可以用 papachiang.github.io/medicineeasy_official 操作
alix2t7 08:51:09
剛測試正常!👍🏻:heart_hands:🏻
JC Wung 10:42:33
感謝YU和Wei,使用順暢👍

Memo
1. 後續我們可以將評分3類型做分析,除了檢索系統不盡完善 (衛署藥輸字第025921號仿單) 這種類型,是否還有其他類型: 是。可思考檢索系統不完善的解決方案。
2. 很好奇為什麼會出現外國語: 韓文、波蘭語
3. 進度7/30 (7/20)
alix2t7 20:53:10
關於2.:首要原因是我們選用的都是小(參數)模型——模型能瘦下來,但還能像大模型般正常運作,靠得是把不同語言折疊再折疊,收納進更小的空間內。

所以當我們在問他藥劑這種高度專業且複雜的問題時,他在腦中思考時就會不自覺的換上另一個語言回答,無法有效的維持在一種語言上。因爲語言跟語言間的距離被壓縮,跑起來更容易偏掉。

有點類似我們在講不甚熟稔的第二外語時,會不小心又用上另一個不熟的第三外語一樣。

模型小的第二個特色是,他的注意力沒辦法像更大的保持的那麼好。所以在思考維度複雜的問題,也是同樣更容易跑偏。

至於爲什麼是波蘭文與韓文… 這問題我猜可能要用上Claude最新發明的LLM潛意識挖掘技巧,才能回答了😂😂😂
2026-07-22
alix2t7 14:25:19
我其實覺得… 這兩個選擇並排時,會讓人想直接選「信任與穩定」;但我最後選了「親和與溫暖」。

因為並排比較,總讓人感到很像兩個都會有,只是你要哪個優先而已。但如果,今天是二擇一,只能有一個,老實說我的投票直覺就完全不一樣了:

信任+穩定+藍色,雖然可靠,但冷調。
親和+溫暖+橘色,親和,但不失專業。〈=我覺得單以logo論,這是我們需要的:

內藍外橘。

對外散發親和溫暖感;但真實應用,是以專業可靠的背景積累,支撐起使用者的信任與品質的穩定。
2026-07-24
yomokan1991 22:08:48
是糖糖耶!可惜我不能請假。我可以分享給認識的朋友嗎?
他剛好之前也有在參與急救AI有關的專案,我想他應該有興趣