3月28日，萬仞智慧智能科技(北京)有限公司（下稱“萬仞AI”）通過官方公眾號宣布，基于自研大模型平臺，正式發(fā)布全球首個8模態(tài)醫(yī)療大模型——董奉大模型。
萬仞AI方面介紹，董奉大模型的名字源自“建安三神醫(yī)”之一的董奉，與華佗、張仲景齊名，并開創(chuàng)了“杏林文化”。據(jù)悉，董奉大模型面向患者、醫(yī)護人員及醫(yī)院管理人員，提供包括在線健康助理、智能分診預(yù)診、初級醫(yī)護指引、病歷校驗質(zhì)檢、醫(yī)生工作助理、診后隨訪助理、專家實時分身會診以及醫(yī)療績效考核、控費管理等覆蓋全病程的大模型應(yīng)用。實現(xiàn)支持語音（如實時語音對話）、文字（如病歷/處方/報告）、圖像（如醫(yī)療影像/手機照片/病理學(xué)圖片）、視頻（如實時分身/自錄視頻/內(nèi)鏡/患者教育）、情感（如語氣/情緒/行為）、結(jié)構(gòu)化數(shù)據(jù)（如檢驗/診斷/醫(yī)學(xué)KG）、電信號（如腦波/脈象/肌電）及生物信息（如基因數(shù)據(jù)）共計8個模態(tài)的輸入與輸出。官方表示，萬仞AI已與吉林大學(xué)、實在智能、威能思軟等機構(gòu)達成戰(zhàn)略合作，搭建了AI科技研究基地和產(chǎn)研合作中心，并已定向在某省人民醫(yī)院（三甲）、某省人民醫(yī)院分院（二甲）和某市級互聯(lián)網(wǎng)醫(yī)院平臺等完成落地。去年5月，自動駕駛公司Momenta產(chǎn)品與工程副總裁王榮興離職的消息傳出，6月王榮興便創(chuàng)立了萬仞AI，并引入前IBM大中華區(qū)Watson醫(yī)療落地總監(jiān)張軼倫作為合伙人。10月，萬仞AI獲得了由銀瓴投資領(lǐng)投的數(shù)千萬元種子輪投資。官方介紹，萬仞AI的企業(yè)戰(zhàn)略介于通用大模型與專屬定制之間，提供貼合我國國情的私有化、小型化、自動化與定制化的企業(yè)級大模型解決方案。除醫(yī)療行業(yè)外，未來還將拓展康養(yǎng)、金融、汽車、農(nóng)業(yè)、零售等行業(yè)。
- 首先是“實時多模態(tài)分身”能力，能夠為醫(yī)療機構(gòu)、互聯(lián)網(wǎng)醫(yī)院服務(wù)機構(gòu)提供實時多模態(tài)分身，并適配立式大屏、平板小屏以及個人手機等各類硬件。萬仞AI介紹，基于董奉大模型，能以實時視頻溝通的形式與用戶持續(xù)進行個性化對話，而非預(yù)設(shè)腳本的循環(huán)錄播，從而形成在線健康助理、智能分診預(yù)診、診后隨訪助理以及專家實時分身會診等線上線下醫(yī)療場景的交互入口。
- 二是在線問診的能力，利用多模態(tài)能力，有效采集患者全病程中的最新癥狀、治療執(zhí)行、不良反應(yīng)、情緒等全方位數(shù)據(jù)，從而對患者病情、依從性等進行解讀和預(yù)測，給出就診建議。同時，董奉大模型通過“醫(yī)生工作助理”、“隨訪機器人”等工具，面向醫(yī)生及患者，實現(xiàn)從診療到康復(fù)的全程助理服務(wù)。
根據(jù)萬仞AI展示的董奉大模型與ChatGPT的簡單對比，在問診方面，ChatGPT提供了更多的可能性和建議，并引導(dǎo)用戶提供更多信息，相對來說，董奉大模型的問診過程體現(xiàn)出一定的針對性。而在“國考”問題的反饋上，董奉大模型表現(xiàn)出了十足的本土化，遵照《國家三級公立醫(yī)院績效考核操作手冊》給出答案，ChatGPT在這一方面則有所欠缺。不過，此次萬仞AI并未公布董奉大模型的參數(shù)規(guī)模、預(yù)訓(xùn)練語料等相關(guān)數(shù)據(jù)，截至發(fā)稿，董奉大模型的體驗入口也尚未公布。
