編者按：盡管有了硬件對(duì)焦系統(tǒng)，但用自動(dòng)顯微鏡采集到的大型圖像數(shù)據(jù)集通常有些低質(zhì)量、失焦的圖像。使用高精度的自動(dòng)圖像分析來(lái)獲取一個(gè)高質(zhì)量無(wú)偏差數(shù)據(jù)集十分重要。谷歌研究人員對(duì)針對(duì)這一需求開發(fā)了深度神經(jīng)網(wǎng)絡(luò)，幫助科學(xué)家們采集高質(zhì)量的圖像。以下是論智對(duì)原文的編譯。

許多科學(xué)圖像應(yīng)用，尤其是顯微鏡，每天能產(chǎn)生好幾T的數(shù)據(jù)。這些應(yīng)用程序能從最近的計(jì)算機(jī)視覺(jué)和深度學(xué)習(xí)中受益。當(dāng)我們與生物學(xué)家共同研究機(jī)器人顯微應(yīng)用方面的工作時(shí)，我們已經(jīng)了解到，將可以把信號(hào)中的噪音清除的高質(zhì)量圖片組合成一個(gè)數(shù)據(jù)集是一項(xiàng)艱巨并且重要的任務(wù)。另外，我們還意識(shí)到，可能有很多科學(xué)家并不會(huì)寫代碼，但他們?nèi)匀幌矚g在分析科學(xué)圖像時(shí)使用深度學(xué)習(xí)。我們可以解決其中的一個(gè)特殊問(wèn)題，即處理失焦圖像。即使使用最先進(jìn)的顯微鏡上的自動(dòng)對(duì)焦系統(tǒng)，配置不當(dāng)或硬件不兼容也可能導(dǎo)致圖像質(zhì)量問(wèn)題。用自動(dòng)化的方式對(duì)焦點(diǎn)質(zhì)量進(jìn)行評(píng)級(jí)可以實(shí)現(xiàn)對(duì)圖像的檢測(cè)、故障排除和刪除。

從深度學(xué)習(xí)中得到保障

在Assessing Microscope Image Quality with Deep Learning一文中，我們訓(xùn)練了一個(gè)深度神經(jīng)網(wǎng)絡(luò)，對(duì)顯微鏡成像中的對(duì)焦質(zhì)量進(jìn)行評(píng)估，結(jié)果優(yōu)于之前的方法。我們還將預(yù)訓(xùn)練的TensorFlow模型與Fiji（ImageJ）和CellProfiler中的插件集成在一起，這是兩種先進(jìn)的開源科學(xué)圖片分析工具，它們可以通過(guò)圖形用戶界面或調(diào)用腳本進(jìn)行使用。

在發(fā)表的文章和開源代碼（TensorFlow、Fiji和CellProfiler）中描述了機(jī)器學(xué)習(xí)項(xiàng)目工作流程的基礎(chǔ)知識(shí)：組裝一個(gè)訓(xùn)練數(shù)據(jù)集（我們將384張細(xì)胞焦點(diǎn)圖像進(jìn)行離焦，避免需要手工標(biāo)記的數(shù)據(jù)集），使用數(shù)據(jù)增強(qiáng)訓(xùn)練模型，評(píng)估泛化（在我們的案例中，是通過(guò)額外的顯微鏡獲取看不見的細(xì)胞類型），同時(shí)部署預(yù)訓(xùn)練的模型。此前用于識(shí)別圖像焦點(diǎn)質(zhì)量的工具通常需要用戶手動(dòng)檢查每個(gè)數(shù)據(jù)集的圖像，以確定在焦點(diǎn)上和離焦圖像之間的臨界點(diǎn)。我們預(yù)訓(xùn)練好的模型不需要用戶設(shè)置參數(shù)，并且還可以更精準(zhǔn)地評(píng)估聚焦質(zhì)量。為了增強(qiáng)可解釋性，我們的模型評(píng)估了84×84像素塊的聚焦質(zhì)量，即上圖中彩色的邊框。

無(wú)目標(biāo)物體的圖像怎么辦？

我們遇到的一個(gè)有趣的挑戰(zhàn)是，很多圖片補(bǔ)丁經(jīng)常是“空白”的，即沒(méi)有目標(biāo)物體，這是一種不存在對(duì)焦質(zhì)量概念的情況。我們沒(méi)有明確地標(biāo)注這些“空白”補(bǔ)丁，然后讓模型去識(shí)別它們，而是對(duì)模型進(jìn)行配置，以預(yù)測(cè)散焦水平的概率分布，從而讓它學(xué)習(xí)表達(dá)這些空白補(bǔ)丁中的不確定性。

下一步做什么？

基于深度學(xué)習(xí)的科學(xué)圖片分析方法將增強(qiáng)準(zhǔn)確度、減少人工手動(dòng)調(diào)參、還有可能帶來(lái)新的發(fā)現(xiàn)。很顯然，數(shù)據(jù)集和模型的可分享和有效性，以及工具的安裝都證明了這種工具的廣泛實(shí)施對(duì)各領(lǐng)域都非常重要。