極客網(wǎng)·極客觀察(朱飛)7月2日 在AI與醫(yī)療行業(yè)加速融合發(fā)展的當(dāng)下,一個(gè)令人矚目的消息震撼了醫(yī)學(xué)界與科技界——上海交通大學(xué)醫(yī)學(xué)院附屬瑞金醫(yī)院(以下簡(jiǎn)稱“瑞金醫(yī)院”)攜手華為,從0到1成功打造臨床級(jí)病理大模型RuiPath,并于6月30日正式宣布開源其核心模型,開啟從1到N的規(guī)模復(fù)制之路。
這一領(lǐng)先成果凝聚了華為算法博士團(tuán)隊(duì)與瑞金醫(yī)院醫(yī)學(xué)博士團(tuán)隊(duì)無數(shù)的心血,堪稱科技界與醫(yī)療界跨界融合的典范。此番隨著RuiPath走向成熟并啟動(dòng)開源,其不僅以病理診斷為核心突破口加速了AI在醫(yī)療領(lǐng)域的落地,也為全國(guó)醫(yī)療領(lǐng)域帶來了AI普惠的曙光。
疾病診斷的“金標(biāo)準(zhǔn)”亟待攻克
病理診斷作為疾病診斷的“金標(biāo)準(zhǔn)”,在醫(yī)療體系中占據(jù)著舉足輕重的地位。然而,當(dāng)前的醫(yī)學(xué)領(lǐng)域在病理診斷方面面臨著諸多棘手難題。
據(jù)中國(guó)國(guó)家癌癥中心發(fā)布的《2024中國(guó)癌癥報(bào)告》數(shù)據(jù)顯示,2022年中國(guó)約新發(fā)482.47萬癌癥病例,其中死亡病例257萬例。而早發(fā)現(xiàn)、早診斷、早治療是關(guān)鍵,亟需擴(kuò)大病理診斷可及性、提升病理診斷準(zhǔn)確率及基層病理診斷水平。
然而,數(shù)據(jù)顯示目前中國(guó)注冊(cè)病理醫(yī)生不足2萬人,缺口高達(dá)14萬,并且約70%的病理醫(yī)生集中在三甲醫(yī)院。這導(dǎo)致這些醫(yī)院的病理診斷工作任務(wù)繁重,醫(yī)生壓力巨大,高強(qiáng)度的工作使得誤診、漏診的風(fēng)險(xiǎn)增加。比如瑞金等大型三甲醫(yī)院每天等待被檢查的切片高達(dá)6000張以上,病理醫(yī)生每天閱片多達(dá)200-300張。
不僅如此,很大一部分基層醫(yī)院的病理醫(yī)生依舊完全依賴傳統(tǒng)顯微鏡進(jìn)行病理診斷,不僅效率低下,而且由于技術(shù)手段有限,出現(xiàn)漏診與誤診的概率較高。這使得許多患者不得不跨省求醫(yī),耗費(fèi)大量的時(shí)間、精力與金錢。
面對(duì)困境,傳統(tǒng)的單癌種小模型開發(fā)模式愈發(fā)顯得力不從心。一方面小模型往往數(shù)據(jù)量有限,難以涵蓋多種癌種的復(fù)雜特征,對(duì)于一些罕見病或復(fù)雜病例更是難以準(zhǔn)確診斷。另一方面小模型的訓(xùn)練和應(yīng)用較為孤立,無法形成一個(gè)系統(tǒng)的、全面的病理診斷體系,難以滿足臨床實(shí)踐中對(duì)精準(zhǔn)、高效病理診斷的迫切需求。
因此,開發(fā)一個(gè)強(qiáng)大的、能夠覆蓋多種癌種、具備高準(zhǔn)確性和高效性的病理大模型,去攻克疾病診斷的“金標(biāo)準(zhǔn)”病理診斷,迫在眉睫。
頂級(jí)團(tuán)隊(duì)跨界合力打造RuiPath
面對(duì)重重困難,瑞金醫(yī)院與華為決定攜手跨界合作,以“三年磨一劍”的長(zhǎng)期主義,踏上從0到1打造臨床級(jí)病理大模型RuiPath的艱難征程。
第一階段的工作重心是病理數(shù)字化,即在瑞金醫(yī)院采用統(tǒng)一數(shù)字病理格式(CSP)高效存放數(shù)據(jù)(空間節(jié)省45%),實(shí)現(xiàn)病理切片數(shù)據(jù)的標(biāo)準(zhǔn)化落地。從2023年聯(lián)合業(yè)界發(fā)布《數(shù)字化智慧病理科建設(shè)白皮書》,到2025年共積累了百萬規(guī)模高質(zhì)量數(shù)字化病理數(shù)據(jù),為后續(xù)的智慧化打下堅(jiān)實(shí)基礎(chǔ)。
第二階段是病理智慧化,這期間華為天才少年團(tuán)隊(duì)入駐瑞金醫(yī)院,進(jìn)行數(shù)據(jù)工程、模型工程、應(yīng)用工程的聯(lián)合研發(fā)。雙方基于高質(zhì)量數(shù)據(jù),通過“醫(yī)生+AI工程師”進(jìn)行模型蒸餾、知識(shí)蒸餾、模型精調(diào),改變了傳統(tǒng)單癌種小模型開發(fā)模式,實(shí)現(xiàn)大模型從泛癌種精準(zhǔn)識(shí)別、輔助診斷任務(wù)到上層應(yīng)用的端到端落地,貫穿醫(yī)生診斷全流程。
值得一提的是,在合作過程中雙方組建了頂級(jí)的跨界“博士天團(tuán)”——瑞金醫(yī)院40余名臨床醫(yī)學(xué)博士、主任級(jí)專家組成病理科專家團(tuán)隊(duì),與華為由來自CMU、北大等頂尖院校的算法博士組成的AI技術(shù)團(tuán)隊(duì),醫(yī)工融合雙向奔赴,方才解決了模型落地過程中的數(shù)據(jù)準(zhǔn)備難、模型開發(fā)難、算力投入大、應(yīng)用對(duì)接難四大難關(guān),完成了RuiPath基于臨床實(shí)際場(chǎng)景的方案設(shè)計(jì)和聯(lián)合開發(fā)。
這其中,每一個(gè)難關(guān)的突破都十分不易。以容易被忽略的數(shù)據(jù)準(zhǔn)備為例,中國(guó)醫(yī)療行業(yè)病理數(shù)字化水平參差不齊,仍有約30%的二、三級(jí)醫(yī)院仍需依賴傳統(tǒng)顯微鏡進(jìn)行病理診斷,病理切片圖像數(shù)據(jù)累積不足;即使在病理數(shù)字化水平較高的三甲醫(yī)院,也面臨圖像數(shù)據(jù)量大、格式不統(tǒng)一、數(shù)據(jù)標(biāo)注耗時(shí)長(zhǎng)的問題,數(shù)據(jù)預(yù)處理耗時(shí)占模型開發(fā)訓(xùn)練時(shí)長(zhǎng)的比例高達(dá)60%。
這方面雙方基于華為DCS AI解決方案著重攻堅(jiān),基于統(tǒng)一數(shù)字病理格式(CSP)格式將繁雜的病理切片圖像格式統(tǒng)一,為模型訓(xùn)練做好數(shù)據(jù)準(zhǔn)備;并通過ModelEngine提供專業(yè)數(shù)據(jù)處理工具,讓醫(yī)生不再是“標(biāo)注工”,而是“審核官”,從逐條標(biāo)注變?yōu)榕繉徍?,?shí)現(xiàn)效率提升數(shù)倍,并保證標(biāo)注的專業(yè)性和準(zhǔn)確性。
最終,雙方通力合作打造出臨床級(jí)多模態(tài)病理大模型RuiPath,其涵蓋泛癌種視覺特征提取、視覺-語言跨層表征對(duì)齊、長(zhǎng)序列的深度思考模型訓(xùn)練機(jī)制等能力,用于全流程臨床病理輔助診斷,目前已覆蓋中國(guó)每年全癌種發(fā)病人數(shù)90%的19個(gè)常見癌種,涵蓋上百個(gè)輔助診斷任務(wù),并可實(shí)現(xiàn)AI互動(dòng)式閱片,將單切片診斷時(shí)間從傳統(tǒng)鏡下的5-10分鐘提升至秒級(jí)。
開源創(chuàng)新推動(dòng)醫(yī)療AI普惠發(fā)展
更進(jìn)一步,作為此次發(fā)布的重頭戲,瑞金醫(yī)院聯(lián)合華為正式開源RuiPath病理模型的核心“視覺基礎(chǔ)模型”, 開啟了RuiPath從1到N的規(guī)模復(fù)制之路。
該模型在業(yè)界12個(gè)主流公開數(shù)據(jù)集的14個(gè)輔助診斷任務(wù)測(cè)試中,有7個(gè)達(dá)到業(yè)界領(lǐng)先水平(SOTA),已具備臨床驗(yàn)證能力。同時(shí)本次開源配套提供測(cè)試數(shù)據(jù)集,覆蓋了肺癌、結(jié)直腸癌、甲狀腺癌、胃癌、乳腺癌、前列腺癌、胰腺癌7個(gè)常見癌種。此外華為還同步開放工具及實(shí)踐指南,全面使能其他醫(yī)院使用基礎(chǔ)模型或開展微調(diào)訓(xùn)練。
在開源開放成為創(chuàng)新主旋律的當(dāng)下,RuiPath這一動(dòng)作意義重大而深遠(yuǎn)。
從基層醫(yī)院的角度來看,以往基層醫(yī)院布局病理AI需要從最基礎(chǔ)的工作開始,耗費(fèi)大量的人力、物力和時(shí)間。現(xiàn)在它們只需結(jié)合自身的數(shù)據(jù)對(duì)開源模型進(jìn)行精調(diào),就能夠快速應(yīng)用病理AI輔助診斷技術(shù),大大節(jié)省了數(shù)據(jù)準(zhǔn)備、模型訓(xùn)練、應(yīng)用開發(fā)的大量初始工作,有效降低了醫(yī)療AI落地門檻。
對(duì)醫(yī)療行業(yè)整體發(fā)展而言,開放數(shù)據(jù)標(biāo)準(zhǔn)、工具、評(píng)測(cè)數(shù)據(jù)集,解決了源頭數(shù)據(jù)處理、模型部署、應(yīng)用開發(fā)、評(píng)測(cè)上線的一系列實(shí)際困難,打通從模型到應(yīng)用的“最后一公里”,為AI行業(yè)化落地提供了最佳實(shí)踐,有利于加速AI在醫(yī)療行業(yè)落地。
同時(shí),瑞金醫(yī)院將積累百年的疾病診斷經(jīng)驗(yàn)沉淀于RuiPath模型并向行業(yè)開源,實(shí)現(xiàn)了頭部三甲醫(yī)院病理診斷能力向行業(yè)的快速?gòu)?fù)制。這有助于拉齊中國(guó)各大醫(yī)院在病理診斷方面的水準(zhǔn),讓不同地區(qū)的患者都能享受到高質(zhì)量的病理診斷服務(wù),真正推動(dòng)“醫(yī)療平權(quán)”。
當(dāng)然,隨著開源發(fā)展模式的運(yùn)轉(zhuǎn),更多同道參與到病理輔助診斷模型的研究與應(yīng)用中,也能加速RuiPath病理模型臨床應(yīng)用落地,共同提高AI醫(yī)療水平。
就在發(fā)布會(huì)期間,瑞金醫(yī)院又與來自海內(nèi)外的12家醫(yī)療機(jī)構(gòu)共同啟動(dòng)RuiPath病理大模型的全球多中心計(jì)劃,共享最新研發(fā)成果,協(xié)同推動(dòng)病理大模型持續(xù)迭代??深A(yù)見,隨著更多醫(yī)院的參與,必將加速RuiPath病理模型臨床應(yīng)用的落地進(jìn)程,讓AI醫(yī)療能力持續(xù)惠及全社會(huì)。
- 從VTuber到Faceless頻道,AI虛擬角色改寫內(nèi)容創(chuàng)作賺錢邏輯
- 華為聯(lián)發(fā)科專利官司再燃戰(zhàn)火 雙方到底爭(zhēng)的是什么?
- 瑞金醫(yī)院與華為“博士天團(tuán)”聯(lián)手攻堅(jiān) 煉就頂級(jí)病理大模型并啟動(dòng)開源
- 投行稱英偉達(dá)市值將沖擊6萬億美元 AI之外還有機(jī)器人萬億市場(chǎng)
- 中國(guó)信通院提出AI WAN目標(biāo)架構(gòu),運(yùn)營(yíng)商IP廣域網(wǎng)價(jià)值變現(xiàn)迎契機(jī)
- 5G-A,聯(lián)通用AI幫你這么玩兒
- 共建AI時(shí)代全球化開發(fā)者生態(tài),華為云持續(xù)加碼海外布局
- 直擊2025 MWC上海:5G-A加速跑,AItoX落地忙
- 行業(yè)熱議“芯片問題沒必要擔(dān)心”,背后的AI創(chuàng)新范式已變
- 28歲華裔創(chuàng)建Scale AI,憑什么拿到Meta天價(jià)投資?
免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。