面向醫(yī)療場景，人工智能作為新質(zhì)生產(chǎn)力的重點方向，已經(jīng)在很多醫(yī)療場景和診療方向提供了大量的產(chǎn)品，提高了效率，增加了醫(yī)療服務(wù)的精準(zhǔn)性和可及性。尤其是隨著大模型的日益興起，涌現(xiàn)出來的能力已經(jīng)開始對醫(yī)療場景帶來改變。這些大模型在醫(yī)學(xué)影像分析、疾病診斷、個性化治療方案制定等方面展現(xiàn)出卓越的性能，不僅提高了醫(yī)療工作的效率，還極大地改善了診斷的準(zhǔn)確性。大模型還能通過分析海量的醫(yī)學(xué)數(shù)據(jù)，發(fā)現(xiàn)潛在的疾病關(guān)聯(lián)和新的治療方法，推動醫(yī)療研究的進(jìn)步和創(chuàng)新。
大量的醫(yī)療人工智能涌現(xiàn)而出，這些人工智能應(yīng)用需要從數(shù)據(jù)、算力、算法上提供系統(tǒng)性的平臺支持；另外一方面，大量的醫(yī)療場景需要人工智能的支持，需要有一套訓(xùn)練、推理、應(yīng)用構(gòu)建的一體化平臺，加速人工智能的孵化。因此統(tǒng)籌建設(shè)醫(yī)療服務(wù)的人工智能中臺，成為了新質(zhì)生產(chǎn)力下的醫(yī)療服務(wù)的必須。應(yīng)滿足自然語言處理NLP、語言識別、圖像識別、人臉識別、醫(yī)療服務(wù)智能機(jī)器人，提供AI支撐組件和機(jī)器識別和深度學(xué)習(xí)與算法訓(xùn)練建模、具有數(shù)據(jù)標(biāo)準(zhǔn)和可視化建模能力?？蓪崿F(xiàn)模型管理和資源管理。建立人工智能醫(yī)療服務(wù)平臺，在醫(yī)療機(jī)構(gòu)臨床工作流方面實現(xiàn)數(shù)字化、便捷化、智能化的全面升級，提升臨床影像病理診斷服務(wù)水平和工作效率。平臺及應(yīng)用要求能同時覆蓋放射影像和數(shù)字病理圖像，且滿足覆蓋多個模態(tài)數(shù)據(jù)、多個AI功能、多個臨床科室、多個應(yīng)用場景的要求。人工智能中臺體系設(shè)計，從五個維度上提供了核心能力：1、從基礎(chǔ)能力上，提供了：數(shù)據(jù)、算力、算法三象限的基礎(chǔ)支持2、從模型生命周期上，包含了模型的：標(biāo)注、研發(fā)、訓(xùn)練、推理、應(yīng)用構(gòu)建、模型-應(yīng)用反饋的全流程3、從模型支持維度上，既支持了傳統(tǒng)的醫(yī)療影像、文本、醫(yī)療垂直領(lǐng)域的人工智能模型，更支持了文本大模型、圖像大模型、醫(yī)療混合模態(tài)大模型等4、從平臺管理上，提供了系統(tǒng)性觀測、資源調(diào)度運營管理、模型質(zhì)量監(jiān)管、運營監(jiān)管等5、從AI應(yīng)用快速部署上，提供了靈活、適配性高的運行沙盒，用于多種類型的AI應(yīng)用部署（1）多算力、多維度算力調(diào)度管理：統(tǒng)一管理和調(diào)度不同類型和規(guī)模的算力資源（2）多維度監(jiān)控報警：提供系統(tǒng)監(jiān)控和報警機(jī)制，確保系統(tǒng)高效穩(wěn)定的運行（3）潮汐調(diào)度、彈性調(diào)度：根據(jù)預(yù)設(shè)規(guī)則或者彈性自動規(guī)則，自動調(diào)度訓(xùn)練-推理-人工智能應(yīng)用之間的算力資源調(diào)度（1）數(shù)據(jù)管理：提供模型訓(xùn)練、驗證所需的數(shù)據(jù)管理平臺，支持和數(shù)據(jù)中臺對接，進(jìn)行合規(guī)安全的專用數(shù)據(jù)集的構(gòu)建和管理（2）標(biāo)注流程管理：提供基于醫(yī)療標(biāo)注要求的全流程可追溯的管理（3）數(shù)據(jù)智能標(biāo)注：提供內(nèi)置醫(yī)療影像、醫(yī)療文本模型、醫(yī)療大模型的全自動、半自動、全手動的標(biāo)注工具，支持混合醫(yī)療模態(tài)數(shù)據(jù)集自動融合（1）模型研發(fā)：提供從模型構(gòu)建、訓(xùn)練、調(diào)優(yōu)到評估的全流程研發(fā)支持（2）分布式訓(xùn)練：支持超大規(guī)模、大模型的分布式訓(xùn)練，支持?jǐn)?shù)據(jù)并行、模型并行、復(fù)雜并行工作流的訓(xùn)練模式（1）模型、數(shù)據(jù)集市：實現(xiàn)模型、數(shù)據(jù)到集市的發(fā)布，調(diào)用部署（2）MaaS服務(wù)能力：提供模型即服務(wù)的能力，通過平臺提供各種模型服務(wù)的接口（3）推理服務(wù)：優(yōu)化模型的推理過程，提供自動化的部署能力，提供模型推理的量化優(yōu)化工具（4）調(diào)度服務(wù)：提供基于模型推理過程中的并發(fā)，進(jìn)行多模型、彈性的調(diào)度（5）模型微調(diào)：基于現(xiàn)有基礎(chǔ)模型的快速微調(diào)（2）多租戶的方式、訂閱制按需使用AI應(yīng)用（3）AI數(shù)據(jù)、AI訪問的匯聚和訪問控制，AI數(shù)據(jù)的主動結(jié)構(gòu)化（4）通過AI結(jié)果的指標(biāo)，自動進(jìn)行多場景、多應(yīng)用的聯(lián)動計算，提高AI應(yīng)用的自動化和智能化水平（5）檢索引擎，可以對歷史AI結(jié)果進(jìn)行大規(guī)模檢索，幫助快速查找和分析，支持更明智的決策。（1）模型測試：提供模型測試環(huán)境和工具，確保模型質(zhì)量和性能
（2）運營管理：提供對模型質(zhì)量的反饋和收集，提供模型調(diào)用過程中的記錄和回顧反饋（1）提供信息采集內(nèi)置工具，支持對文本、網(wǎng)頁、數(shù)據(jù)中臺等系統(tǒng)中提取信息（2）支持基于大模型的文本向量化工具、醫(yī)療圖像向量化工具，向量數(shù)據(jù)庫、多維度的檢索功能（3）支持基于大模型的RAG模式的智能體構(gòu)建、Agentic工作流構(gòu)建輕代碼工具（4）支持通過服務(wù)接口、對話界面的方式提供給醫(yī)療場景應(yīng)用使用。用戶通過填寫技能名稱、技能標(biāo)識等完成技能創(chuàng)建，基于技能創(chuàng)建意圖，進(jìn)行意圖編輯、測試驗證等功能應(yīng)用；（1）可以從外部平臺或服務(wù)器上下載技能，批量導(dǎo)入到本地平臺；（2）支持技能編輯、技能刪除、單個技能下載和批量選中后下載等維護(hù)功能；（3）用戶通過填寫意圖名稱、意圖標(biāo)識等完成創(chuàng)建，意圖標(biāo)識不可更改，創(chuàng)建完成后即可基于意圖添加語料，進(jìn)行語料結(jié)構(gòu)化、技能構(gòu)建、測試驗證等功能應(yīng)用；（4）支持意圖的字段編輯、意圖刪除、單個意圖查詢功能；（5）支持讓機(jī)器理解用戶意圖的自然語言回答，具體包括：語料、實體、只能貼弧等功能；（6）支持提示意圖是否完成構(gòu)建，待驗證語料是否包含非法字符，并對已完成構(gòu)建的意圖進(jìn)行驗證測試；（7）支持填寫實體名稱、實體標(biāo)識、描述及內(nèi)容詞條來完成創(chuàng)建；（8）支持自建實體內(nèi)容的編輯、刪除、查詢；（9）支持病歷、報告、醫(yī)療文獻(xiàn)的自動摘要、關(guān)鍵詞提取、情感分析和主題建模；（10）支持理解復(fù)雜的醫(yī)學(xué)術(shù)語和上下文，支持醫(yī)生和患者的自然語言交互。（1）支持中文連續(xù)語音聽寫識別，標(biāo)準(zhǔn)或帶口音普通話、粵語的免切換；（2）支持中英文混合聽寫，提供中文中混讀少量的英文聽寫功能；（3）支持按數(shù)字串或數(shù)值讀多種方式的聽寫識別功能；（4）提供標(biāo)點智能預(yù)測和口述標(biāo)點相結(jié)合方式；（5）支持短語音(<60s)和連續(xù)超長語音(>3h)識別功能；（7）支持熱詞優(yōu)化，可在服務(wù)端添加個性化或全局熱詞，實時生效，提升專有詞匯的識別率；（8）支持對語音停止間隔進(jìn)行參數(shù)配置，滿足不同場景需求；（9）支持場景化小包資源，默認(rèn)提供5個；（10）支持文本規(guī)范化處理，如字母大小寫、數(shù)字串、醫(yī)學(xué)單位符號規(guī)整等；（11）支持服務(wù)端語音識別服務(wù)API和SDK調(diào)用，接口支持Android以及Windows系統(tǒng)；（12）醫(yī)學(xué)AI中臺中文語音識別準(zhǔn)確率達(dá)到96%及以上(第三方機(jī)構(gòu)測試報告)。（1）實時將文字信息轉(zhuǎn)化為聲音信息；（2）支持多個醫(yī)療定制發(fā)音人，滿足多場景合成播報需要；（3）提供多檔語速配置，支持在語音合成時，靈活改變語音播放速度；（4）提供多檔音量配置，支持在語音合成時，靈活控制音量的大?。?/span>（5）支持中英文文本的混合播報，其中中文支持普通話和粵語和英語；（6）支持用戶自定義發(fā)音詞典、停頓優(yōu)化等參數(shù)設(shè)置的標(biāo)記語言；（7）支持語音合成服務(wù)接口調(diào)用；（8）醫(yī)學(xué)AI中臺中英文語音合成自然度達(dá)到4.5分及以上。（1）使用圖像識別技術(shù)來自動檢測和分析醫(yī)療圖像，如X光片、CT掃描、MRI圖像和病理切片等，以輔助醫(yī)生進(jìn)行疾病診斷和治療規(guī)劃。（2）利用卷積神經(jīng)網(wǎng)絡(luò)(CNNs)等模型，從圖像中自動學(xué)習(xí)到復(fù)雜的特征表示，用于疾病的識別和分類。;（3）對醫(yī)療圖像進(jìn)行預(yù)處理，包括圖像增強(qiáng)、噪聲去除、對比度調(diào)整等，以提高圖像的質(zhì)量和特征的可辨識性；（4）結(jié)合如MRI和CT圖像等多種類型的圖像信息機(jī)型進(jìn)行多模態(tài)融合，以獲得更全面的診斷依據(jù)，提高檢測的準(zhǔn)確性和可靠性；（5）利用圖像分割和三維重建技術(shù)進(jìn)行可視化處理，幫助醫(yī)生更好地理解和展示病變的位置和范圍：（6）利用計算機(jī)分析人臉圖像，提取特征并與數(shù)據(jù)庫中存儲的模板比對，以確認(rèn)個人身份的生物識別技術(shù)。應(yīng)用于醫(yī)院的患者身份確認(rèn)和重要區(qū)域的人員管理等安全驗證、訪問控制等領(lǐng)域。AI中臺基于資源進(jìn)行建模和應(yīng)用支撐，其支撐流程如下：（1）利用模型開發(fā)組件，notebook代碼式開發(fā)和工作流拖拉拽組件式，選擇機(jī)器學(xué)習(xí)框架的鏡像構(gòu)建模型開發(fā)環(huán)境；（2）利用模型開發(fā)組件實現(xiàn)模型開發(fā)，并設(shè)置模型訓(xùn)練參數(shù)，包括計算資源選擇，評估方法等實現(xiàn)模型訓(xùn)練任務(wù)創(chuàng)建，并啟動模型訓(xùn)練任務(wù)；（3）利用模型管理將模型訓(xùn)練的模型進(jìn)行統(tǒng)一管理，并設(shè)計模型對比、模型版本、模型評估等功能；（4）利用模型管理中抽象的模型將進(jìn)行模型服務(wù)發(fā)布，選擇計算資源、模型路徑、啟動參數(shù)等，實現(xiàn)模型服務(wù)發(fā)布。在服務(wù)詳情內(nèi)創(chuàng)建模型接口，模型接口對應(yīng)每一項模型服務(wù)的子功能，利用接口實現(xiàn)應(yīng)用支持。考慮系統(tǒng)數(shù)據(jù)源的復(fù)雜性和來源多樣性，平臺支持訪問廣泛的數(shù)據(jù)，包括：結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)，內(nèi)部數(shù)據(jù)、外部數(shù)據(jù)。（1）為保證數(shù)據(jù)源對接操作的靈活、易用性，數(shù)據(jù)源對接提供圖形化參數(shù)置界面操作，無需掌握復(fù)雜的各種數(shù)據(jù)庫技術(shù)；（2）支持本地文件的數(shù)據(jù)源接入；（3）支持常見文件格式(txt、csv、Excel等)的數(shù)據(jù)源接入；（4）支持傳統(tǒng)關(guān)系型數(shù)據(jù)庫(至少支持Oracle、PostgreSQL、MYSQL)的數(shù)據(jù)源接入；（5）支持分布式數(shù)據(jù)存儲(HIVE、HDFS等)的數(shù)據(jù)源接入；（6）支持MPP數(shù)據(jù)庫(Greenplum、Teradata等)的數(shù)據(jù)源接入；（7）支持非結(jié)構(gòu)化數(shù)據(jù)(文本、圖像、zip格式)的接入；（8）為方便數(shù)據(jù)分析人員進(jìn)行快速的數(shù)據(jù)定位，針對接入的結(jié)構(gòu)化數(shù)據(jù)需支持?jǐn)?shù)據(jù)的預(yù)覽功能，圖表的形式展示數(shù)據(jù)樣本、字段、字段類型等內(nèi)容；（9）考慮到數(shù)據(jù)的安全性問題，需支持項目級別的數(shù)據(jù)隔離和授權(quán)管理。考慮到未來建模需求的普遍性，滿足更多數(shù)據(jù)分析人員甚至業(yè)務(wù)人員的建模需求，平臺需支持自動化建模能力，最大程度降低建模門檻，提高建模效率。（1）支持選擇數(shù)據(jù)集后一鍵自動化機(jī)器學(xué)習(xí)建模；（3）支持建模設(shè)計可視化，訓(xùn)練過程可視化，建模成果可視化；（4）支持查看自動機(jī)器學(xué)習(xí)建模所得的機(jī)器學(xué)習(xí)模型的源代碼；（5）支持自動化選擇多種算法模型并調(diào)參優(yōu)化模型；（7）支持自動機(jī)器學(xué)習(xí)建模也一鍵生成可視化分析工作流，實現(xiàn)與拖拽式建模模塊的打通，以便用戶對其進(jìn)行更加專業(yè)、靈活的優(yōu)化迭代。機(jī)器學(xué)習(xí)模型訓(xùn)練的最終目標(biāo)是為了滿足業(yè)務(wù)應(yīng)用服務(wù)，平臺需提供模型由訓(xùn)練環(huán)境到生產(chǎn)環(huán)境的一鍵式部署上線功能，降低模型上線的工程化難度，提高模型部署效率。在線模型服務(wù)支持在線部署應(yīng)用，以API的形式面向上層業(yè)務(wù)提供服務(wù)。平臺支持多種調(diào)用方式，并提供相應(yīng)的代碼樣例，包括但不限于同步API調(diào)用、消息隊列異步調(diào)用的實時模型應(yīng)用方式以及批處理的非實時模型應(yīng)用方式，從而滿足具有不同延時要求的場景的業(yè)務(wù)需求；模型生產(chǎn)化部署需包含特征工程，包含但不限于缺失值填充、歸一化、數(shù)值編碼、OneHot編碼、數(shù)據(jù)集拆分等方法，可以實現(xiàn)通過使用原始數(shù)據(jù)集進(jìn)行模型調(diào)用；為保證業(yè)務(wù)安全、穩(wěn)定，需支持模型的上線審核；支持對模型的生命周期進(jìn)行管理，提供包括部署、正式上線、灰度上線、影子上線、下線等操作。針對分析場景的多樣化需求和未來可能的數(shù)據(jù)建模需求，平臺需提高豐富的算法庫支持，要求包括：分類、聚類、回歸、關(guān)聯(lián)、時間序列、統(tǒng)計、推薦及文本挖掘等不同類型的算法，并支持開發(fā)人員進(jìn)行自由擴(kuò)展。支持包括Python2、Python3、PySpark等不同開發(fā)語言的算子。
特別聲明：智慧醫(yī)療網(wǎng)轉(zhuǎn)載其他網(wǎng)站內(nèi)容，出于傳遞更多信息而非盈利之目的，同時并不代表贊成其觀點或證實其描述，內(nèi)容僅供參考。版權(quán)歸原作者所有，若有侵權(quán)，請聯(lián)系我們刪除。
凡來源注明智慧醫(yī)療網(wǎng)的內(nèi)容為智慧醫(yī)療網(wǎng)原創(chuàng)，轉(zhuǎn)載需獲授權(quán)。
