Unet++(pytorch实现)

共 2845字,需浏览 6分钟

 ·

2024-04-11 17:58


e159cec190362c5123292fe6132fb040.webp


向AI转型的程序员都关注了这个号👇👇👇




Unet++网络


Dense connection


Unet++继承了Unet的结构,同时又借鉴了DenseNet的稠密连接方式(图1中各种分支)。




15ee4b2d0e685b502fe8f76e1f630993.webp






作者通过各层之间的稠密连接,互相连接起来,就像Denset那样,前前后后每一个模块互相作用,每一个模块都能看到彼此,那对彼此互相熟悉,分割效果自然就会变好。


在实际分割中,一次次的下采样自然会丢掉一些细节特征,在Unet中是使用skip connection来恢复这些细节,但能否做的更好呢?Unet++就给出了答案,这种稠密连接的方式,每一层都尽量多的保存这种细节信息和全局信息,一层层之间架起桥梁互相沟通,最后共享给最后一层,实现全局信息和局部信息的保留和重构。 




deep supervision


当然,简单的将各个模块连接起来是会实现很好的效果。而我们又能发现,一个Unet++其实是很多个不同深度的Unet++叠加。那么,每一个深度的Unet++是不是就都可以输出一个loss?答案自然是可以的。


所以,作者提出了deep supervision,也就是监督每一个深度的Unet++的输出,通过一定的方式来叠加Loss(比如加权的方式),这样就得到了一个经由1、2、3、4层的Unet++的加权Loss(图2 不同深度Unet++融合)。


7c461b729c8b037dffa936f533e5afd8.webp




那么,deep supervision又有什么用呢?-剪枝


既然Unet++由多个不同深度的Unet++叠加起来,那么随意去掉一层,前向传播的梯度不会受到任何变化,但你发现Unet++第三个输出的效果和第四个输出效果差不多时,那就可以毫不犹豫删去4层深度的Unet++。比如,直接删去图3中棕色部分,就可以实现剪枝。这样,就得到了更加轻量化的网络。


3ef2a69685593ef9f2e96ff819a4008e.webp




模型复现


Unet++


为了更直观一些,我把代码中的所有符号都和网络结构中对应上了。


bda8b2359a1460a2b9363cc10bfb0bcb.webp


ab4974081662d5bfedbdd01cc9554c6d.webp


fb0256b0528cf9fef724d297033338bb.webp


728e233f85fe0b315395964b8e1d9d34.webp


b2d68f9b28397f649a38ebcbfe7fc1e0.webp


2f608dba5f1c55becc0aafc6a18e1f30.webp


8a165c38dc8f6399847b9ff52c67b937.webp


fa835a03639288f3cd1180ff144d3f77.webp




数据集准备


数据集使用Camvid数据集,可在CamVid数据集的创建和使用-pytorch中参考构建方法。


https://blog.csdn.net/yumaomi/article/details/124786867


614c43ae36b30db31c8ad9491f349ba7.webp


2a83bdf5b2a2d10202925556b0df33a7.webp


0d6270c96152a04265d70898ed3d2bc8.webp


76e8909d53a1baea9e059f6fff32288d.webp


886b34a33cdd0b945f9f60cca3f81201.webp


587d2f9b26110ff32542260200a82763.webp


dcc1abd02742768e662e97b94c4b30f2.webp


95636380aa0b4fa95c88007ade553234.webp


训练结果


49a7ec7f083d3a0d6df12cd8773c44b9.webp




原文地址


https://blog.csdn.net/yumaomi/article/details/124823392




机器学习算法AI大数据技术


 搜索公众号添加:  datanlp



长按图片,识别二维码








阅读过本文的人还看了以下文章:




TensorFlow 2.0深度学习案例实战




基于40万表格数据集TableBank,用MaskRCNN做表格检测




《基于深度学习的自然语言处理》中/英PDF




Deep Learning 中文版初版-周志华团队




【全套视频课】最全的目标检测算法系列讲解,通俗易懂!




《美团机器学习实践》_美团算法团队.pdf




《深度学习入门:基于Python的理论与实现》高清中文PDF+源码




《深度学习:基于Keras的Python实践》PDF和代码




特征提取与图像处理(第二版).pdf




python就业班学习视频,从入门到实战项目




2019最新《PyTorch自然语言处理》英、中文版PDF+源码




《21个项目玩转深度学习:基于TensorFlow的实践详解》完整版PDF+附书代码




《深度学习之pytorch》pdf+附书源码




PyTorch深度学习快速实战入门《pytorch-handbook》




【下载】豆瓣评分8.1,《机器学习实战:基于Scikit-Learn和TensorFlow》




《Python数据分析与挖掘实战》PDF+完整源码




汽车行业完整知识图谱项目实战视频(全23课)




李沐大神开源《动手学深度学习》,加州伯克利深度学习(2019春)教材




笔记、代码清晰易懂!李航《统计学习方法》最新资源全套!




《神经网络与深度学习》最新2018版中英PDF+源码




将机器学习模型部署为REST API




FashionAI服装属性标签图像识别Top1-5方案分享




重要开源!CNN-RNN-CTC 实现手写汉字识别




yolo3 检测出图像中的不规则汉字




同样是机器学习算法工程师,你的面试为什么过不了?




前海征信大数据算法:风险概率预测




【Keras】完整实现‘交通标志’分类、‘票据’分类两个项目,让你掌握深度学习图像分类




VGG16迁移学习,实现医学图像识别分类工程项目




特征工程(一)




特征工程(二) :文本数据的展开、过滤和分块




特征工程(三):特征缩放,从词袋到 TF-IDF




特征工程(四): 类别特征




特征工程(五): PCA 降维




特征工程(六): 非线性特征提取和模型堆叠




特征工程(七):图像特征提取和深度学习




如何利用全新的决策树集成级联结构gcForest做特征工程并打分?




Machine Learning Yearning 中文翻译稿




蚂蚁金服2018秋招-算法工程师(共四面)通过




全球AI挑战-场景分类的比赛源码(多模型融合)




斯坦福CS230官方指南:CNN、RNN及使用技巧速查(打印收藏)




python+flask搭建CNN在线识别手写中文网站




中科院Kaggle全球文本匹配竞赛华人第1名团队-深度学习与特征工程






不断更新资源


深度学习、机器学习、数据分析、python


 搜索公众号添加:  datayx  








浏览 70
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报
评论
图片
表情
推荐
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报