中國(guó)科學(xué)院香港創(chuàng)新研究院人工智能與機(jī)器人創(chuàng)新中心(簡(jiǎn)稱「中國(guó)科學(xué)院香港創(chuàng)新院AI中心」)于3月11日在香港科學(xué)園正式發(fā)布最新研發(fā)的面向醫(yī)療垂直領(lǐng)域的AI多模態(tài)大模型——CARES Copilot 1.0。
中國(guó)科學(xué)院香港創(chuàng)新研究院是中國(guó)科學(xué)院在港設(shè)立的首個(gè)國(guó)家級(jí)新型研發(fā)機(jī)構(gòu)。CARES Copilot大模型最早在2023年9月第八屆華為全聯(lián)接大會(huì)上亮相。彼時(shí),CARES Copilot已在香港中文大學(xué)威爾士親王醫(yī)院和中山大學(xué)附屬第一醫(yī)院開(kāi)始測(cè)試,并在經(jīng)鼻顱底手術(shù)和呼吸介入治療手術(shù)中取得了顯著進(jìn)展。
圖片來(lái)自中國(guó)科學(xué)院香港創(chuàng)新院AI中心官網(wǎng)
據(jù)介紹,CARES Copilot是一個(gè)可信賴、可解釋、面向醫(yī)療垂直領(lǐng)域并能與智能醫(yī)療設(shè)備高度集成的大模型系統(tǒng)。CARES Copilot 1.0實(shí)現(xiàn)了圖像、文本、語(yǔ)音、視頻、MRI、CT、超聲等多模態(tài)的手術(shù)數(shù)據(jù)理解。支持超過(guò)100K上下文的長(zhǎng)窗口理解和高效分析,能理解超過(guò)3000頁(yè)的復(fù)雜手術(shù)教材,對(duì)于年輕醫(yī)生的培訓(xùn)和教學(xué)具有極高的實(shí)用價(jià)值。此外,該系統(tǒng)能通過(guò)深度檢索功能,快速精確地提取手術(shù)教材、專家指南、醫(yī)學(xué)論文等專業(yè)文檔的信息,確保其提供的答案具有高度的可信度和可追溯性。經(jīng)測(cè)試,系統(tǒng)能在一秒鐘內(nèi)完成百萬(wàn)級(jí)數(shù)據(jù)的快速檢索,同時(shí)保持95%的準(zhǔn)確率。該系統(tǒng)已在多家醫(yī)院的不同科室進(jìn)行了內(nèi)部測(cè)試和迭代優(yōu)化。中國(guó)科學(xué)院香港創(chuàng)新院AI中心執(zhí)行主任劉宏斌教授介紹,國(guó)際醫(yī)學(xué)大模型測(cè)評(píng)榜單結(jié)果顯示,CARES Copilot 1.0多項(xiàng)指標(biāo)國(guó)際排名第一。同時(shí),他強(qiáng)調(diào),中心對(duì)CARES Copilot 1.0進(jìn)行了輕量化部署。作為一個(gè)700億參數(shù)的大模型,CARES Copilot 1.0現(xiàn)在可以做到一個(gè)消費(fèi)級(jí)的顯卡上,同時(shí)保證性能沒(méi)有損失,從而可以在每個(gè)醫(yī)院,甚至每一個(gè)手術(shù)室部署。劉宏斌教授表示,檢驗(yàn)人工智能技術(shù)價(jià)值的唯一目標(biāo)是看它是否真正能為醫(yī)生賦能,解決他們的痛點(diǎn),拓展他們的能力邊界,也只有這樣,人工智能技術(shù)才能真正推動(dòng)人類醫(yī)學(xué)的進(jìn)步。香港中文大學(xué)外科學(xué)系神經(jīng)外科組主任陳達(dá)明教授指出,開(kāi)放式人工智能已經(jīng)在改變?nèi)祟惖纳?,在醫(yī)療上肯定會(huì)做出更大的改變。而轉(zhuǎn)為神經(jīng)科學(xué)研發(fā)的大模型,可以超越一般教學(xué)的要求,能夠配合手術(shù),影像導(dǎo)航及機(jī)器人的大模型應(yīng)用,在臨床、手術(shù)室及研究院,直接輔助前線醫(yī)護(hù)面對(duì)突發(fā)狀況,督導(dǎo)、預(yù)警、防止手術(shù)步驟風(fēng)險(xiǎn),推進(jìn)神經(jīng)科學(xué)的疆界。北京協(xié)和醫(yī)院神經(jīng)外科主任醫(yī)師、研究生導(dǎo)師馮銘教授介紹,手術(shù)大模型和手術(shù)導(dǎo)航結(jié)合起來(lái),可以為術(shù)者提供實(shí)時(shí)的解剖定位信息,提高手術(shù)安全性。首都醫(yī)科大學(xué)附屬北京同仁醫(yī)院神經(jīng)外科主任、研究生導(dǎo)師康軍教授認(rèn)為,AI技術(shù)與手術(shù)機(jī)器人技術(shù)相結(jié)合,會(huì)給外科手術(shù)的發(fā)展帶來(lái)巨大變革,未來(lái)無(wú)論從手術(shù)方式、理念、器械、設(shè)備等方面,神經(jīng)外科醫(yī)生都要應(yīng)對(duì)AI技術(shù)和機(jī)器人技術(shù)帶來(lái)的新問(wèn)題和新挑戰(zhàn)。