DeepSeek-R1力壓谷歌OpenAI,醫(yī)療AI斯坦福封王,中國AI新紀(jì)元來了? 原創(chuàng)
昨夜,斯坦福大學(xué)醫(yī)學(xué)院聯(lián)合微軟、斯坦福基礎(chǔ)模型研究中心(CRFM)發(fā)布了涵蓋 35 項臨床基準(zhǔn)測試的醫(yī)療 AI 綜合評測 MedHELM,中國 AI 實驗室 DeepSeek-R1 以 66% 勝率力壓群雄 ,將谷歌 Gemini、OpenAI o3-mini 及 Claude 3.7 Sonnet 等巨頭甩在身后。
?
?
這是中國大模型首次在權(quán)威臨床評測中登頂,更標(biāo)志著醫(yī)療 AI 的歷史性躍遷。
?
要知道,斯坦福評測團(tuán)隊構(gòu)建的評估體系可以說是醫(yī)療 AI 領(lǐng)域最具含金量的存在:35 個基準(zhǔn)測試覆蓋臨床決策支持、病例生成、醫(yī)學(xué)研究輔助等 22 個細(xì)分場景,每個環(huán)節(jié)都會經(jīng)過臨床醫(yī)生驗證。
?
就是在這樣嚴(yán)苛的考核下,DeepSeek R1 展現(xiàn)出令人驚嘆的全面性。從自動生成結(jié)構(gòu)化病歷到設(shè)計個性化治療方案,從解讀復(fù)雜醫(yī)學(xué)影像到輔助藥物研發(fā),它在醫(yī)療場景中的適應(yīng)能力遠(yuǎn)超同類產(chǎn)品。
?
總的來說,DeepSeek-R1 的突破性表現(xiàn)集中在三大臨床戰(zhàn)場 :
-
診斷決策支持:在疑似乳腺癌病例分析中,R1 生成的鑒別診斷列表與專家判斷重合度達(dá) 89%,遠(yuǎn)超 GPT-4o 的72%;
-
患者溝通共情:面對焦慮型患者提問,R1 回復(fù)中“安撫性措辭”占比達(dá) 37%,較 Claude 3.5 提升15個百分點;
-
病歷結(jié)構(gòu)化處理:在 EHRSQL 測試(將自然語言指令轉(zhuǎn)為臨床研究數(shù)據(jù)庫查詢)中,R1 準(zhǔn)確率較第二名高 11%,大幅緩解了醫(yī)生處理數(shù)據(jù)的負(fù)擔(dān)。
?
在臨床細(xì)節(jié)方面,目前所有模型在 MedCalc-Bench(病歷數(shù)值計算)和 ICD-10 編碼分配中集體均表現(xiàn)低迷,暴露出現(xiàn)有 AI 對醫(yī)療結(jié)構(gòu)化數(shù)據(jù)的處理短板。而 R1 憑借長思維鏈推理能力,在開放式診療推演中展現(xiàn)出接近人類的思維耐性。
?
這背后,是 DeepSeek 對強(qiáng)化學(xué)習(xí)技術(shù)的前瞻性押注。R1 通過純強(qiáng)化學(xué)習(xí)(RL)訓(xùn)練,在極少標(biāo)注數(shù)據(jù)下自主進(jìn)化出復(fù)雜推理策略。這種模式使其在診斷路徑推演時,能像資深醫(yī)生般反復(fù)權(quán)衡證據(jù)鏈,甚至?xí)蝗恍拚跏颊`判,重新串聯(lián)關(guān)鍵癥狀。
?
值得一提的是,這場勝利的含金量還源于評測體系的革命性設(shè)計。團(tuán)隊通過MedHELM 綜合評估框架構(gòu)建了一個模擬臨床醫(yī)生真實場景的分類體系,包含類別、子類別和任務(wù)三個層級。
?
最終,29 名來自 14 個醫(yī)學(xué)專科的執(zhí)業(yè)醫(yī)師親手參與構(gòu)建評測框架,將傳統(tǒng)的執(zhí)照考題升級為 22 類真實臨床場景,覆蓋診斷決策、患者溝通、病歷生成等全流程。
?
?
對于 13 個開放式基準(zhǔn)測試,團(tuán)隊采用了大語言模型評審團(tuán)(LLM-jury)評估方法。
?
為了驗證大語言模型評審團(tuán)(LLM-jury)評估法的創(chuàng)新價值,斯坦福團(tuán)隊還比較了 AI 評分與臨床醫(yī)生獨立打分的區(qū)別,結(jié)果顯示,LLM 陪審團(tuán)與醫(yī)生的一致性(ICC=0.47)竟超過醫(yī)生間平均一致性(ICC=0.43)。
?
?
這意味著 AI 不僅能答題,更開始理解醫(yī)療價值的衡量尺度,這無疑是醫(yī)療 AI 領(lǐng)域的重大轉(zhuǎn)折:一個更具溫度的醫(yī)療 AI 時代正拉開帷幕。
?
另一方面,于國產(chǎn) AI 而言,DeepSeek 在醫(yī)療方面的勝利,意味著中國 AI 不僅在模型數(shù)量上追趕,更在醫(yī)療這類硬核賽道實現(xiàn)了質(zhì)量反超。
?
DeepSeek R1 已經(jīng)撕開了一道口子,而中國 AI 能否在這道光亮中開辟新紀(jì)元,需要整個行業(yè)用行動書寫答案。
