騰訊優圖首個醫療AI深度學習預訓練模型MedicalNet正式對外開源。據稱，這是全球第一個提供多種3D醫療影像專用預訓練模型的項目，將為全球醫療AI發展提供基礎。許多研究表明，深度學習的發展非常依賴數據量。自然圖像領域中存在著許多海量數據集，如ImageNet，MSCOCO。基于這些數據集產生的預訓練模型推動了分類、檢測、分割等應用的進步。

不同于自然圖像，醫療影像大部分都是3D結構形態的，同時，由于數據獲取和標注難度大，數據量稀少，目前尚未存在海量數據集及對應的預訓練模型。

MedicalNet是由騰訊優圖開發的一系列預訓練模型，在深度學習應用基礎上開發而成，專用于3D醫療影像。據稱，MedicalNet可以為任何3D醫療影像AI應用起到“打地基”的作用，加快模型收斂，減輕模型對數據量的依賴。

據了解，MedicalNet具備以下特性：1、MedicalNet提供的預訓練網絡可遷移到任何3D醫療影像的AI應用中，包括但不限于分割、檢測、分類等任務；2、尤其適用小數據醫療影像AI場景，能加快網絡收斂，提升網絡性能；3、通過簡單配置少量接口參數值，即可進行微調訓練；4、項目提供多卡訓練以及測試評估代碼，接口豐富，擴展性強；5、提供不同深度3D ResNet預訓練模型，可供不同數據量級應用使用。

為了產生3D醫療影像的預訓練模型，MedicalNet聚集多個來自不同3D醫療領域的語義分割小規模數據集，并提出了基于多分支解碼器的多域聯合訓練模型來解決數據集中的標注缺失問題。據稱，該團隊的預訓練模型可以遷移到任何3D醫療影像應用的深度學習模型中。

該團隊將MedicalNet模型遷移到預訓練時未接觸過的Visceral和LIDC數據集中，完成全新的肺部分割和肺結節分類任務，并與目前常用的從零訓練（train from scratch）以及Kinetics視頻3D預訓練模型在性能以及收斂速度上做了比較。

據稱，在肺部分割應用上，相比于Train from Scratch,MedicalNet在Dice上有16%到33%幅度的提升，相比于Kinetics有4%到7%幅度的提升。在肺結節良惡性分類應用上，相比于Train from Scratch，MedicalNet有6%到23%幅度的預測正確率（Acc）提升，相比于Kinetics有7%到20%幅度的提升。

在收斂速度上，實驗證明，無論是在肺分割任務還是肺結節分類任務上，MedicalNet均能為模型提供一個較低的初始化損失值，明顯加快損失下降速度，下圖為MedicalNet性能的一個簡單示例，展示了在全器官分割應用中，不同預訓練方式在一定訓練迭代次數下的測試結果。可以看出，基于我們的預訓練模型（MedicalNet）的結果最接近標簽（ground truth），且遠優于從零訓練（train from scratch）的結果，更多細節請參考論文（論文：《Med3D: Transfer Learning for 3D Medical Image Analysis》）。

隨著人工智能的火熱化，醫療影像AI也成為了當前各應用領域中最熱門的版塊。區別于其他人工智能應用，人工智能在醫療領域的應用門檻最高，最大的原因在于標注數據的匱乏。醫療影像數據的獲取通常需要經歷重重關卡，同時，由于領域的專一性，數據通常需要資深醫師標注，而每個3D數據的標注耗時耗力。在當前緊張的醫護資源下，醫療影像數據的獲取戰線將非常漫長，大大阻礙了應用落地的進程。再者，標注數據量相當有限，大部分醫療部門都需要面臨數據量稀少和深度學習之間的鴻溝。

專有領域專有模型，MedicalNet相當于為各個3D醫療影像應用準備了具備臨床通用知識的數據庫。即使在小數據量中，該數據庫的有效特征也能幫助落地應用取得較好的醫療檢測性能，這大大減輕醫療影像AI應用對數據量的依賴，實現了落地需求，加快了落地速度。

截至2019年8月，騰訊已在Github上發布81個開源項目，包含騰訊AI、微信、騰訊云、騰訊安全等相關領域，并累計在 Github 獲得了超過23萬Star數，在國內和國際收獲了關注和認可。MedicalNet是騰訊在醫療AI領域的首個開源項目，有望為全球醫療AI發展提供重要基礎。騰訊表示，后續也將繼續提供更多類型的模型，為全球醫療AI的基礎建設助力。