- 博客(18)
- 收藏
- 关注
原创 LightM-UNet:Mamba轻量级UNet进行医学图像分割
UNet及其变体已成功地应用于医学图像分割中,并取得了较好的效果.然而,这些模型,尤其是基于Transformer架构的模型,由于其大量参数和计算负载而带来了挑战,使得它们不适合移动的健康应用。最近,以Mamba为代表的状态空间模型(SSM)已经成为CNN和Transformer架构的竞争性替代方案。在此基础上,我们在UNet中使用了Mamba作为CNN和Transformer的轻量级替代品,旨在解决真实的医疗环境中计算资源限制所带来的挑战。
2024-08-12 23:48:17
1624
原创 复现Swin-UNet出现报错train.py: error: the following arguments are required: --cfg
#config这里加了default,把required=ture删掉了。
2024-08-09 20:17:18
665
原创 Mamba最新综述《A Survey of Mamba》-2024.8.5(下半篇)
Mamba是一种新兴的深度学习架构,由于其强大的建模能力和计算效率,它在语言生成、图像分类、推荐和药物发现等不同领域取得了显著的成功。最近,已经做出了越来越多的努力来开发具有更强大的表示学习能力和更低的计算复杂度的基于曼巴的深层学习模型。鉴于曼巴的迅速发展,迫切需要有一个系统的概述。为了弥合这一差距,在本文中,我们提供了一个全面的审查Mamba,重点是其架构的进步,数据的适应性和应用领域,提供研究人员既深入了解和Mamba的最新发展的概述。
2024-08-08 18:38:31
4062
原创 Mamba最新综述《A Survey of Mamba》-2024.8.5
深度学习作为一项重要技术,引发了人工智能(AI)领域的一场重大革命,导致人类生活方式发生了巨大变化。作为最具代表性的架构,Transformers为众多高级模型提供了支持,尤其是包含数十亿参数的大型语言模型(LLM),成为深度学习的基石。尽管取得了令人印象深刻的成就,变形金刚仍然面临着固有的局限性,特别是由于注意力计算的二次计算复杂性而导致的耗时推理。
2024-08-08 01:21:00
2181
原创 VM-UNet: Vision Mamba UNet for MedicalImage Segmentation
在医学图像分割领域,基于神经网络和基于变换器的模型都得到了广泛的研究。然而,神经网络在长距离建模能力方面表现出局限性,而变形金刚则受到其二次计算复杂度的阻碍。近年来,以Mamba为代表的状态空间模型(SSM)已成为一种有前途的方法。它们不仅在模拟长距离相互作用方面表现出色,而且保持了线性计算复杂度。
2024-08-04 12:35:28
1178
原创 日常阅读论文——U-Mamba
很抽象。卷积神经网络(CNNs)和变换器(Transformers)是生物医学图像分割中最常用的两种结构,但由于其固有的局部性和计算复杂性,这两种结构在处理长范围相关性方面的能力都很有限。为了解决这一难题,我们引入了U-Mamba,一种用于生物医学图像分割的通用网络。受状态空间序列模型(SSM)的启发,我们设计了一个混合CNN-SSM模块,该模块将卷积层的局部特征提取能力与SSM捕捉长相关性的能力相结合。此外,U-Mamba还拥有一个自配置机制,使其能够自动适应各种数据集,而无需人工干预。
2024-08-04 00:43:07
1523
原创 Transformer VS RNN的推理速度
RNN的线性复杂度主要来自于其在每个时间步使用固定数量的参数,并且每个时间步的计算独立于其他时间步。这使得RNN在处理序列数据时,其计算量随着序列长度线性增长,而不是像某些其他模型那样可能随着序列长度呈平方增长。这种线性复杂度使得RNN在处理长序列时相对高效,尤其是在推理阶段。
2024-08-03 01:19:50
1517
原创 nnU-Net论文解读
通常的分割模型都是针对某一特定任务(如 心脏分割)进行研究的,需要特定的网络架构设计以及训练方法的设定,它只能解决特定问题而无法解决一系列问题。而这个医学分割十项全能赛就是希望参赛者能开发一个适应多种分割任务的算法-nnUNet。
2024-08-03 01:04:47
1530
转载 TemplateField 上不支持回调,因为某些控件不能在回调中正确更新
Visual Studio2022:TemplateField 上不支持回调,因为某些控件不能在回调中正确更新
2023-02-17 11:11:24
154
原创 人工神经网络ANN(BP网络)
人工神经网络ANN,简称神经网络,是指由大量的 处理单元(神经元)互相连接而形成的复杂网络结构,是对人脑组织结构和运行机制的某种抽象、简化和模拟。人工神经网络(简称ANN ),以数学模型模拟神经元活动,是基于模仿大脑神经网络结构和功能而建立的一种信息处理系统。它有多层和单层之分,每一层包含若干神经元,不同的神经元与相应的权重连接从而组成的线性或非线性的分类...
2022-06-14 16:56:24
15664
5
原创 hadoop分布式文件系统(HDFS)
Hadoop 分布式文件系统 HDFS(Hadoop Distributed File System)是一个能够兼容普通 硬件环境的分布式文件系统,和现有的分布式文件系统不同的地方是,Hadoop 更注重 容错 性和兼容廉价的硬件设备,这样做是为了用很小的预算甚至直接利用现有机器就实现大流量和大数据量的读取。Hadoop 使用了 POSIX 的设计来实现对文件系统文件流的读取。HDFS 原来是 Apache Nutch 搜索引擎开发的一个部分,后来独立出来作为 一个 Apach子项目。...
2022-06-14 16:07:47
2436
转载 【无标题】
数据挖掘150道笔试题转载文章https://www.cnblogs.com/baiboy/p/mianshi.html一、单选题某超市研究销售纪录数据后发现,买啤酒的人很大概率也会购买尿布,这种属于数据挖掘的哪类问题?(A)A. 关联规则发现 B. 聚类C. 分类 D. 自然语言处理以下两种描述分别对应哪两种对分类算法的评价标准? (A)(a)警察抓小偷,描述警察抓的人中有多少个是小偷的标准。(b)描述有多少比例的小偷给警察抓了的标准。A. Precision, Recall B
2022-05-23 09:47:25
597
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人