▼更多精彩推薦，請(qǐng)關(guān)注我們▼

Dragonfly軟件的一個(gè)特色功能就是可以讓用戶自己方便快速地訓(xùn)練深度學(xué)習(xí)的模型，實(shí)現(xiàn)圖像分割等工作的智能完成。關(guān)于Dragonfly里面深度學(xué)習(xí)工具和智能分割向?qū)Чぞ叩膽?yīng)用，可以看丁博士的兩個(gè)視頻來(lái)入門(mén)：

1. Dragonfly 軟件中 Deep Learning Tool 應(yīng)用入門(mén)

鏈接：https://pan.baidu.com/s/1RV8IVpn3wOhpnrVOklN6sg

提取碼：p6fl

2.Dragonfly 軟件中智能分割向?qū)?Segmentation Wizard)工具介紹

鏈接：https://pan.baidu.com/s/1m3DGobzebK0o9Afy_iOy-Q

提取碼：4jro

這里我們要講的是一個(gè)特殊的深度學(xué)習(xí)模型方法，稱為 Multi-Modality即多模態(tài)圖像輸入。通常我們做深度學(xué)習(xí)訓(xùn)練實(shí)際上都是單模態(tài)的，即一個(gè)輸入圖像對(duì)應(yīng)一個(gè)輸出Multi-ROI，訓(xùn)練模型和應(yīng)用模型都是這樣一對(duì)一。而多模態(tài)是多個(gè)輸入圖像對(duì)應(yīng)一個(gè)輸出Multi-ROI，針對(duì)的主要是某些特定成像方法，例如電子顯微鏡中有時(shí)可以對(duì)同一個(gè)樣品的區(qū)域采集兩幅圖(背散射和二次電子)，或者X射線CT中可以采用雙能射線源得到同一個(gè)樣品的兩組CT圖像，都是這里說(shuō)的Multi Modality。而RGB恰好相當(dāng)于提供了同一個(gè)樣品的三組圖像，所以我們可以把它作為三個(gè)輸入來(lái)訓(xùn)練一個(gè)Multi Modality的深度學(xué)習(xí)模型。

下面我們用Segmentation Wizard來(lái)做一個(gè)演示(注意僅在Dragonfy的2020.2版本中才開(kāi)始有此功能)。

在Dragonfly里面同時(shí)選中從RGB圖像導(dǎo)入之后生成的三組數(shù)據(jù)，選擇右鍵菜單的啟動(dòng)智能分割向?qū)?#xff1a;

然后就是添加作為訓(xùn)練數(shù)據(jù)用的Frame：

然后添加深度學(xué)習(xí)模型。我們這個(gè)demo中使用的是U-Net 2D, Level=4：

訓(xùn)練之后得到的模型可以從分割向?qū)Чぞ咧袑?dǎo)出到主程序，然后就可以拿來(lái)對(duì)所有圖像進(jìn)行自動(dòng)分割了。

看看我們訓(xùn)練的模型最后應(yīng)用到全部切片圖上的自動(dòng)分割效果吧：

小Tip: 對(duì)Multi-Modality的模型而言，作為Input的多組數(shù)據(jù)的順序(鼠標(biāo)點(diǎn)擊選中的順序)是非常重要的，應(yīng)用模型時(shí)的數(shù)據(jù)順序必須和訓(xùn)練模型(首次啟動(dòng)分割向?qū)?時(shí)的數(shù)據(jù)順序保持一致，否則無(wú)法進(jìn)行自動(dòng)分割。

---

---

古生物聯(lián)合工作室

醫(yī)學(xué)3D打印工作室

光固化快速成型中心

三維可視化分析工作室

安徽數(shù)研智能科技有限公司期待與全國(guó)各地的醫(yī)師、科研人員、3D打印設(shè)備廠商開(kāi)展廣泛合作！歡迎您的關(guān)注！

---

總結(jié)

以上是生活随笔為你收集整理的docker 训练深度学习_利用RGB图像训练MultiModality的深度学习模型进行图像分割的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。