- 博客(28)
- 收藏
- 关注
RSS订阅原创 EDA研发平台如何实现混合云调度和云上虚拟队列？
EDA研发平台本来运行在本地集群，但经常面临突发项目算力不足的情况，如何自动实现本地算力不足时自动溢出到云，同时智能化调度云上算力资源。MemVerge混合云调度平台提供了解决方案。
2025-03-05 14:03:16
571
原创 美味大闸蟹背后的基因科学
中华绒螯蟹的基因组规模相当大，为1.27 Gb，单倍体染色体数为73，这在节肢动物中算是相对较高的水平，尽管其中包含大量的重复元素。其中一个重要的参数是VM创建策略。如果AWS回收了正在运行作业的折扣实例，MMCloud会将作业迁移到新实例，并按照相同的策略进行 - 首先尝试折扣实例，如果失败则转向按需实例。对于使用 Nextflow 的用户而言，不需要额外的学习成本，体验基本不变，但可以享受 MMCloud 提供的所有功能，比如 SpotSurfer、WaveRider 和 WaveWatcher 等。
2024-11-29 14:00:00
2101
原创 丝滑上云后，R生信的IT成本还降低了55%
从上表中的详细数据中可看出，MMCloud在接受用户的创建的作业后，后台直接申请的抢占式实例来第一次降低成本，在作业的实际中，MMCloud通过感知Bismark的作业运行负载，中途在后台做了一次云主机机型更改，来将规格与负载进行实时匹配，最终使得性能提升，而成本下降。MemVerge MMCloud应用级计算平台是一项针对上述挑战的创新解决方案。1、抛开云资源和自建机房的成本对比不谈，在考虑上云时，Regenerative Bio的CIO和IT主管首先想到的就是业务迁移，员工培训和各种使用习惯的改变；
2024-11-29 08:00:00
215
原创 MemVerge与美光科技利用CXL®内存提升NVIDIA GPU利用率
通过利用 CXL 内存和智能分层的力量，企业可以解锁创新的新机会，并加速其走向 AI 驱动成功的旅程。
2024-11-28 17:12:29
749
原创 某半导体内部吐槽大会，IT&CAD、研发看过来
一个高效、灵活且能够支持快速扩展的EDA研发计算云平台，让“难题”成为了过去式，让“增长”成为了进行时！
2024-11-25 10:48:38
234
原创 MMCloud+JuiceFS：云端Nextflow工作流的新方案
JuiceFlow是一种实时按需的，基于管控面的组合配置方案。该方案以JuiceFS作为主要的文件系统来执行NextFlow工作流。
2024-11-15 10:00:00
2383
原创 Nextflow最佳实践：如何在云上高效处理大规模数据集
Nextflow 是一个用于简化数据驱动计算流程的工具，可以在各种计算环境中轻松部署。它采用了分布式计算和容器技术，实现了高度模块化、可重复性和可扩展性。
2024-11-14 21:30:00
1088
原创 芯片研发的痛：老板说今年IT预算砍一半，怎么办？
在芯片研发领域，资金的投入与创新的产出往往是成正比的。然而，当经济压力和市场变动迫使企业不得不削减预算时，研发团队便面临着前所未有的挑战。
2024-11-14 17:07:18
320
原创 高校生信科研的实践：1个月的计算量1天就完成了？
这种一站式的软件管理极大地简化了科研流程，提高了工作效率。在组会上，云小南分享了这次云上计算的经历，他的导师也要求他记录下标准操作流程（SOP），以便在未来遇到时间紧迫的任务时，有一个可靠的应对方案。在了解了云小南的需求后，小木老师制作了一个小型演示，利用工具的弹性计算功能，自动化地为每个样本分配空闲的阿里云服务器，并根据资源消耗自主迁移，直到完成所有VCF文件的分析。他发现了MemVerge开发的计算工具，云小南联系了MemVerge的技术人员，他们向他展示了工具的基本用法，并协助他联系了云杉小木老师。
2024-11-04 13:00:00
771
原创 MMCloud+JuiceFS：云端Nextflow工作流的新方案
JuiceFlow是一种实时按需的，基于管控面的组合配置方案。该方案以JuiceFS作为主要的文件系统来执行NextFlow工作流。数据与元数据分离：JuiceFS将文件数据以块的形式存储在对象存储平台（如Amazon S3）中，而元数据则存储在数据库（如Redis）中，这种设计提升了性能和可扩展性。卓越性能：JuiceFS旨在实现毫秒级延迟和接近无限的吞吐量，非常适合需要高性能计算的Nextflow工作流。与MMCloud的无缝集成。
2024-11-01 14:00:00
611
原创 手把手教你搭建一个生信分析算力平台
分析流程环节是最贴近生信业务的模块，我们以一个相对标准的分析流程为基础，为您详细拆解在分析流程的每个阶段分别有哪些需要熟悉的工具和常见场景。生物医药行业的原始数据非常庞大，甚至PB级以上，过去两年时间，我们和很多生信工程师交流，大家面临的困境都很一致，特别是对于企业级的生信团队，更需要搭建一个专业的生信分析算力平台。还是如何为业务提供可持续性保障，以及让工程师们更易用，都进行了核心技术拆解。当一个平台基本搭建完成后，如何部署？我们把服务客户的经验结合自有的技术能力，最终整合出一份翔实的技术地图。
2024-10-31 10:00:00
513
原创 重生之我在芯片公司当IT
“我叫张一凡，万万没想到，我居然……重生了！张一凡，一名普通的IT工程师，因为一次突如其来的意外，重生回到了十年前，摇身一变成为了芯生科技——C市冉冉升起的明星企业，芯片行业的新贵——中不可或缺的技术大拿。他的人生，被彻底改写了。
2024-10-30 21:00:00
2273
原创 为什么我的Jupyter总是崩溃？附解决方案
作为开发人员或程序员，你可以通过专注于编写高效代码和限制你的代码在内存中的停留时间来手动管理内存。MemVerge的解决方案为需要处理大规模数据集和复杂计算任务的用户提供了一个强大的支持，持续优化和合理配置是确保Jupyter Notebook高效运行的关键。gc.collect或垃圾收集器来释放未引用的内存。
2024-10-30 14:12:44
1233
原创 成本降了50%，哥伦比亚大学这么做基因分析
这确保您始终可以在最佳的 EC2 实例上运行，平衡性能和成本，避免资源不足或过度配置。FunGen-xQTL 项目是该实验室的一个关键倡议，该项目汇集了美国十几个研究机构的力量，专注于研究衰老大脑中的分子数量性状基因座（QTL），以期了解基因调控对于为阿尔茨海默病研究提供来自老龄群体的有价值的功能基因组学数据发挥着至关重要的作用，这些数据通过综合多组学分析进行整理和处理。随着测序技术的进步，Dr. Gao Wang 的团队面临着日益增长的计算需求，这些需求不仅来自于数据量的激增，还来自于分析算法的复杂性。
2024-10-24 11:30:00
574
原创 HPC高性能计算场景中如何实现“运行时调度”
与传统的调度工具只关注任务的开始和结果相比，MMCloud能够专注于在任务运行时进行智能资源调度，以实现资源的最大化利用和成本效益的优化。
2024-10-23 15:30:00
184
原创 长时间运行的HPC作业，如何节省高达90%成本
本文内容翻译自AWS HPC Blog，作者：Eran Brown在云计算时代，企业对成本控制的需求日益增长。Spot 实例作为一种灵活的云资源，以其低成本优势成为企业节省开支的重要选择。Amazon EC2 Spot 实例使 AWS 客户能够充分利用 AWS 的闲置计算能力，节省高达 90% 的计算成本。这对于日常需要大量计算资源的高性能计算（HPC）用户来说非常有吸引力。然而，长时运行的 HPC 作业往往难以承受 Spot 实例的中断，这使得他们难以享受 Spot 实例带来的低成本优势。
2024-10-23 10:00:00
911
原创 MemVerge携手Cadence，为EDA工作负载带来成本优化与弹性增强
这种方式无论是在本地还是在 各大主流云平台上，都能有效提升作业的弹性和可靠性。Spot 实例存在的中断风险对于需要长时间连续运行的 EDA 工作负载构成了挑战，特别是后端设计工作流程中的 EDA 作业，可能需要数天才能完成，而 Spot 实例可能在通知后的两分钟内被回收，导致作业必须冷启动，最终使得。此次合作基于 MemVerge 的 MMCloud 平台，结合 Cadence 在 EDA 领域的深厚积累，共同为 AWS Spot 实例上的长时高内存 EDA 作业提供无缝支持，显著提升成本效益和作业弹性。
2024-10-22 17:00:00
596
原创 与时间赛跑：芯片研发设计场景算力解决方案
分享一个故事。有一家名为“未来芯（名字来源于AI虚拟，如有雷同，纯属巧合）”的芯片研发公司，作为该公司的研发总监，Peter的芯片设计团队，由一群充满激情的工程师组成，他们每天都在与摩尔定律赛跑，试图在硅片上雕刻出智能的未来。
2024-10-22 08:00:00
684
原创 芯片研发设计的OOM和资源浪费难题，终于有解了！
在芯片设计的漫长旅程中，：任务因为内存不足（OOM）崩溃、计算资源利用率低、项目时间一拖再拖，研发和IT团队就像被困在沙漠中的探险队，每一步都步履维艰，仿佛永远到不了终点。特别是一些需要很长的运行时间，同时内存消耗巨大。通常这种任务会出现在芯片设计的关键阶段，比如前端设计、后端验证等，因为一瞬间内存需求激增，但机器撑不住，内存不足，于是任务就“崩”了。无非是升级到内存更大的服务器，通常要选任务所需内存的1.5倍甚至2倍以上，或者尝试用本地磁盘做SWAP来扩展内存。
2024-10-21 15:18:41
1068
原创 半导体企业单月算力成本降了50%怎么做到的？
据企查查的数据显示，2023年，平均每天有30家芯片企业在消失。在政策、资本聚光灯下泡沫翻涌的半导体行业进入“冷静期”，2024年，有的项目已然退场，有的项目冉冉升起。S半导体，一家位于中国上海的数字芯片创新企业，半年内连获两轮融资，第一款芯片也即将面世。在激烈的竞争中，他们率先卷出了“消费降级，体验升级”的新实践。
2024-10-21 15:02:56
571
原创 如何在云服务器上轻松部署 Jupyter
Jupyter 是最流行的科学计算工具之一，考虑到大型科学计算、数据引力以及远程团队间轻松共享和协作的需求，将 Jupyter 环境迁移到云越来越流行。Memory Machine Cloud（简称 MMCloud）是一个云自动化平台，可帮助您在云中快速部署可扩展的 Jupyter 环境。一旦部署完成，MMCloud 将提供先进的自动化功能，帮助您最大限度地提高性能并优化云支出。
2023-11-02 15:46:51
180
原创 Nextflow之nf-float插件怎么在云上高效使用
"MMCloud帮助我们MDI生物实验室计算生物学团队更好地使用AWS Spot EC2实例，节省了云计算成本。此外，WaveWatcher工具让我们能够实时观察资源使用情况，帮助我们在Nextflow流程中多角度的优化资源分配。——Joel Graber，MDI生物实验室计算生物学和生物信息学主任Memory Machine Cloud 极大地增强了 Nextflow 的工作流编排能力，提供了高性能计算自动化、checkpoint/restore和云主机选型优化能力。
2023-11-02 15:45:46
108
原创 生信分析场景下，如何将 BLAST 作业计算成本降低 91%
客户名称：宏序生物所属行业：医疗客户简介：致力于在临床医学、生命健康提供一站式、全方位服务和系统解决方案。
2023-11-02 15:44:17
87
原创 如何将WGS分析成本降低30% 【内含Sentieon免费攻略】
目前MMCloud内置App library已集成Sentieon Genomics，MMCloud用户可直接安装免费使用，而不需要再额外为Sentieon付费。
2023-09-14 15:46:08
275
1
原创 经验｜ 如何在 AWS 上使用 Nextflow
“WaveRider 会为 NextFlow 启动的数千个作业中的每一个选择最合适的虚拟机类型。这让我比以往任何时候都更有效率，简直太酷了。– Vince Pagano，TGen高级科学程序员。
2023-09-05 16:12:06
120
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人