Mochi 1视频生成模型亮相:动作流畅,开放源代码

有哪些开源的视频生成模型 这些模型的开源降低了AI视频生成门槛,推动了多领域创新,未来将进一步缩小与闭源模型的差距。 阅读详情

前沿科技速递🚀

近日,AI公司Genmo发布了最新的开源视频生成模型Mochi 1。Mochi 1在动作质量和提示词遵循能力方面有显著提升,并且与市面上许多闭源商业模型相媲美。作为一款支持个人和商业用途的开源工具,Mochi 1不仅展示了开源技术的力量,也为开发者提供了一个强大的视频生成工具。

来源:传神社区

01 模型简介

Mochi 1 是Genmo推出的一款全新视频生成模型,它在多项技术指标上超越了市场上的一些主流模型,如Runway的Gen-3 Alpha、Luma AI的Dream Machine、快手的Kling等。最重要的是,它以开源形式发布,并且在Apache 2.0许可下可供个人和商业使用。与市面上高昂定价的闭源模型相比,Mochi 1的开源性质将大大降低视频生成的门槛,给创作者和开发者带来新的可能性。

通过提供在线体验和开源代码,任何人都可以亲身测试Mochi 1的强大功能,体验从文本生成高质量视频的便捷。

图片

02 技术亮点

Mochi 1 在技术上取得了一些突破,尤其是在架构设计和视频生成质量方面。以下是Mochi 1的几个技术亮点:

AsymmDiT:非对称扩散变换器架构

Mochi 1采用了Genmo自主研发的AsymmDiT架构,具备100亿参数,是目前开源视频生成领域最大的一款模型。该架构在处理视觉信息时特别注重效率,使视频生成的推理过程更加平滑和流畅。视觉部分的参数量是文本部分的四倍,使得它能够捕捉到更为丰富的视觉细节。

高效视频压缩:视频VAE技术

Mochi 1引入了视频VAE(变分自编码器)技术,将原始视频数据压缩至1/128的大小,大幅减少了生成过程中的内存需求。这种高效的压缩技术降低了用户设备的资源要求,使得开发者能够在较低配置下生成高质量视频。

精确提示词遵循

该模型对提示词的遵循能力非常出色,能够根据用户输入的文本提示生成高度符合指令的视频。无论是复杂的场景、动作还是角色,Mochi 1都能准确生成符合用户预期的内容。这是通过结合多模态自注意力机制来实现的,模型能够同时关注文本和视觉tokens,并对其进行独立处理,从而达到精确控制生成视频的效果。

图片

动作流畅性与物理模拟

Mochi 1能够生成每秒30帧的视频,视频的动作流畅且连贯,特别是在模拟复杂物理现象时表现尤为突出。例如,流体动力学和毛发的模拟在Mochi 1生成的视频中显得自然且真实。此外,Mochi 1能够跨越“恐怖谷”,在生成接近现实的人类动作时表现优异。

图片

局限性

分辨率限制:目前Mochi 1的预览版仅支持480p分辨率的视频生成,虽然已经能够满足一些基本需求,但对于希望获得更高质量视频的用户来说,可能还有提升空间。值得期待的是,Genmo团队已经在积极开发高清版本,未来将支持更高的分辨率如720p甚至更高。

极端动作处理:在涉及一些非常复杂或极端动作的生成时,Mochi 1偶尔会出现轻微的视觉失真或形变。这种情况主要发生在动作变化较大的场景中,虽然不太常见,但仍有待进一步优化。随着模型的不断更新,这一问题可能会得到解决。

资源需求:尽管Mochi 1通过各种优化极大提升了生成效率,但目前推理仍需要较高的计算资源支持,推荐配置是4张H100 GPU。对于部分开发者和用户而言,这可能会稍微增加使用门槛。不过,随着硬件性能的不断提升和模型的持续优化,未来的资源要求可能会有所降低。

03 样例展示

示例指令:"A stylish woman walks down a Tokyo street filled with warm glowing neon and animated city signage. She wears a black leather jacket, a long red dress, and black boots, and carries a black purse. She wears sunglasses and red lipstick. She walks confidently and casually. The street is damp and reflective, creating a mirror effect of the colorful lights. Many pedestrians walk about."

cm2mpt4kx006t3j6pu37qg7z5

示例指令:"A timelapse from the year 0 BC to the year 2000"

cm2mpt4ld007c3j6p07jlzqgt

04 模型下载

传神社区:

https://opencsg.com/models/genmo/mochi-1-preview

huggingface:

https://huggingface.co/genmo/mochi-1-preview

欢迎加入传神社区

•贡献代码,与我们一同共建更好的OpenCSG

•Github主页

欢迎🌟:https://github.com/OpenCSGs

•Huggingface主页

欢迎下载:https://huggingface.co/opencsg

•加入我们的用户交流群,分享经验

图片

扫描上方二维码添加传神小助手


“      关于OpenCSG

开放传神(OpenCSG)成立于2023年,是一家致力于大模型生态社区建设,汇集人工智能行业上下游企业链共同为大模型在垂直行业的应用提供解决方案和工具平台的公司。

关注OpenCSG

图片

加入传神社区

图片

一个可一键生成短视频的AI大模型,亲测可用 MoneyPrinterTurbo —— 一个利用大模型,一键生成短视频的开源项目。只需输入视频主题或关键词,就可以全自动生成视频文案、视频素材、视频字幕、视频背景音乐,最后合成一个高清的短视频。 阅读详情

相关推荐

DAZ STUDIO 快速渲染技巧

DAZ STUDIO 快速渲染技巧: 本文将向您展示几个快速渲染技巧。您将学习如何使您的Daz Iray渲染和照明在Daz工作室内更快。 当你有一个大场景,这可能需要很多小时进行渲染。 但是如果你想大幅度降低渲染时间呢?这篇文章的提示应该能让你达到这个目标。 首先,我们需要弄清楚一件事——没有“完美的环境或设置”这样的东西。是因为渲染设置是高度个性化和主观性的东西,这主要取决于场景和硬件。如果你有一个功能强大的计算机,你可以允许更多的低渲染时间,反之亦然。因此,一切都取决于您尝试渲染的对象和机器。

DAZSTUDIO的博客 9644

深入解析Diffusion和AsymmDiT:Mochi 1的高效AI视频生成之路

Mochi 1凭借其创新的AsymmDiT架构,在AI视频生成领域展现了强大潜力。其高效生成流程和优异的时序一致性,使其在处理复杂动态场景时表现突出。对于有志于探索AI视频生成技术的研究者和开发者而言,Mochi 1是一个强大且灵活的解决方案。如果您对Mochi 1或其他AI视频生成技术感兴趣,欢迎访问VideoAiHub,了解更多相关内容,帮助您创作出更高质量、更具创意的视频作品!

不忘初心 2412

硬件基础(4):(7)ADC电压采集:软件校准(标定、拟合)

在实际项目中,**软件端校准**可以有效弥补硬件方面(分压电阻误差、放大器失调、参考源误差等)带来的系统性偏差,从而提高 ADC 测量精度。下面是一个常见的**多点实测校准**流程与思路,个人感觉传感器标定的原理也只这样。

FCZlll的博客 6240

Genmo的Mochi 1模型,最强开源AI视频生成模型,100亿参数视频革命

Genmo 的团队由数据科学家、软件工程师、AI 研究员和视觉艺术家组成,他们利用大数据和先进的深度学习技术训练 AI 模型,以便自动执行视频内容的创建和编辑任务。公司的使命是解锁通用人工智能的右脑,Mochi 1 是他们推出的开源视频生成模型,是构建可以想象一切事物的世界模拟器的第一步。Genmo 的产品主要搭建在 Discord 上,是一个以社区为中心的视频生成应用,Genmo 还采取了基于使用量的定价策略,向用户收取每月 10 美元的费用,提供更多生成次数、优先访问新模型的权限和无水印的服务。

qq_26303031的博客 1682

Mac OS X 工具技巧:一文搞定个性化命令行窗口(iTerm2 + zsh + oh-my-zsh 配置Powerline风格)

本不想写这篇文章的,因为在Linux下已经配置过很多次,想着mac应该找篇文章一次就搞定了,结果还是踩坑,看了很多文章,不是某一点没不清楚,就是截图有问题或者命令有问题,官网又难得找等等……花了3个多小时才搞定,所以,还是来总结一篇文章就能够搞定的教程。 为什么要用zsh?用了这么多年的bash,不能说bash不好,不过当我用了zsh后发现,什么叫更好用。 配置过程稍微有点繁琐,但是你看过效果...

mickjoust的技术小屋 1万+

某东详情页h5st 算法分析

某东详情页h5st 算法分析

自成背后的博客 1万+

Genmo 的 Mochi1 AI 视频生成技术:内容创作的新纪元

Mochi1 以其卓越的功能和开源的灵活性,为内容创作注入了新的活力。无论是个人创作者还是企业营销团队,Mochi1 都能帮助你更高效地实现创意。如果你还没有尝试过这项技术,现在就访问 Genmo 平台,体验其强大的视频生成功能,并订阅 VideoAiHub,获取最新的 AI 视频生成资讯吧!

不忘初心 1135

由异常的测试眼图引发的深入思考

信号测试中出现“双眼皮”的眼图测试效果,可能的导致因素总结如下:PCB通道阻抗设计不匹配,负载端出现严重反射;发射端采用了不当的信号预处理;接收器均衡处理不当;通道串扰严重... 基于以上的假设,本文就逐一分析下这些因素到底是如何对正常的信号眼图造成影响的。

一只豌豆象的博客 3060

认识一下 Mochi-1--最新的免费开源人工智能视频模型

Genmo 是一家专注于视频生成的人工智能公司,该公司宣布发布 Mochi 1 的研究预览版。Mochi 1 是一种新的开源模型,可根据文本提示生成高质量视频,其性能可与 Runway 的 Gen-3 Alpha、Luma AI 的 Dream Machine、Kuaishou 的 Kling、Minimax 的 Hailuo 等领先的闭源/专有竞争对手媲美,甚至超过它们。

weixin_41446370的博客 2338

医疗工具识别(手术器械计数):基于YOLOv8的智能手术器械管理系统

YOLOv8是Ultralytics公司于2023年推出的最新一代目标检测算法,相比前代YOLOv5,在精度和速度上都有显著提升。Anchor-free检测:不再使用预定义的anchor boxes,简化了检测流程更高效的骨干网络:采用CSPDarknet53作为特征提取网络多尺度特征融合:通过PANet结构实现更好的小目标检测损失函数优化:使用CIoU损失提高边界框回归精度YOLOv8提供了多种规模的模型(n/s/m/l/x),可根据实际需求在精度和速度之间进行权衡。

YOLO 480

深入剖析 Wenet 下 AISHELL-1 的 run.sh 脚本:从数据准备到模型训练

run.sh脚本用于处理 AISHELL-1 数据集的整个训练和测试流程。我们将逐步分析脚本中的每个部分,包括环境变量、参数设置、各个阶段的执行等。stage: 设置脚本的起始阶段(如数据准备)。stop_stage: 设置脚本的结束阶段。通过对 Wenet 下 AISHELL-1 的run.sh脚本的详细剖析,我们希望你能更好地理解每个步骤的功能及其背后的原理。此脚本不仅为模型训练提供了便利,也为用户自定义和扩展训练流程提供了基础。希望本教程能帮助你顺利完成语音识别项目!

帅小柏的博客 1632

Hunyuan-video:混元视频生成模型,开源最强视频生成模型(包含论文代码详解)

缩小闭源和开源视频基础模型之间的差距,加速社区探索。”——混元团队Hunyuan-Video是由腾讯推出的一款高质量的中文通用视频生成模型,它以其卓越的性能和开源的特性,成为了目前开源视频生成基座模型中的佼佼者。该模型支持中文输入提示(Prompt),采用了图像-视频联合训练策略,并通过一系列精细的数据过滤技术,确保了视频的技术质量和审美吸引力。Hunyuan-Video的开源,为视频内容创作者、研究人员和开发者提供了一个强大的工具,以实现更高效、更高质量的视频生成,推动了AI视频技术的发展。

sherlockMa的博客 2万+

win10 跳过U8环境检测的IE WebControls.rar

win10 安装u8的时候 提示IE WebControls 不通过,这个工具可以欺骗u8的检查。 跳过U8环境检测的IE WebControls。提示导入失败后,重新检测通过。

Genmo 发布 Mochi 1:开源视频模型的天花板

根据官方的基准测试,Mochi 1 的表现优于可灵、Luma、Pika 等商用模型。值得一提的是,此次发布的仅是 480P 版本,更强大的 HD 版本也即将推出。最牛逼是,该模型基于 Apache 2.0 协议,完全可商用!发布的视频模型,从演示效果来看,从演示来看应该是当下视频模型的天花板,极大的缩小了与商业模型的差距。该模型需 4 块 H100 显卡即可运行,并且官方提供了。,虽然需要排队等待。

weixin_51674085的博客 568

ET2012新版免狗免安装绿色软件

ET2012新版免狗免安祖昂绿色软件。,新界面,新视觉,

jre9下载 jdk9

(Java SE Runtime Environment 9.0) 9.0u175 官方最新版 【x86|x64】

Mochi 1:革命性开源视频生成模型完全指南

Mochi 1 是一款突破性的开源视频生成模型,以其卓越的运动保真度和强大的提示词遵循能力,显著缩小了闭源与开源视频生成系统之间的差距。该模型基于创新的 Asymmetric Diffusion Transformer(AsymmDiT)架构构建,拥有 100 亿参数,是迄今为止公开发布的最大视频生成模型,采用宽松的 Apache 2.0 许可证授权。 ## 🚀 Mochi 1 核心优势解析

gitblog_00854的博客 678

最新的sdio 4.0 spec 协议标准 带书签 高清完整PDF版

Part-E1-SDIO-Specification-Ver4.00-Final-120220.pdf:最新的sdio 4.0 spec 协议标准 带书签 高清完整PDF版,包括SDIO 接口的外设,SDIO 接口官方协议等。

【AIGC半月报】AIGC大模型启元:2024.10(下)

知识与洞察的宝藏,汇聚AIGC领域最前沿的动态、最深刻的分析和最具前瞻性的展望。

一个内容严谨、方向前沿、极具实践价值的AI大模型技术分享站 1869

Mochi 1 开源视频生成模型教程

Mochi 1 是由 Genmo Team 开发的一款开源视频生成模型。它基于 Asymmetric Diffusion Transformer (AsymmDiT) 架构,是一个拥有 10 亿参数的扩散模型,能够生成高质量的视频内容。Mochi 1 通过其独特的非对称架构,优化了文本和视觉的处理能力,使得生成的视频具有高保真的动作和强烈的提示遵守性。此模型适用于多种应用场景,包括但不限于内容创作

gitblog_00797的博客 1334

开源项目 | Mochi:最强开源视频生成模型

Mochi 1 preview 是一个开源的、最先进的视频生成模型,具有高保真运动和初步评估中的强烈提示依从性。此模型极大地缩小了封闭和开放视频生成系统之间的差距。

m_aigc2022的博客 3412

[ComfyUI]Mochi:最强视频开源模型,它来了!

最近 AI 绘画和 AI 视频都挺热闹的,AI 绘画有新鲜出炉的 SD3.5,AI 视频有智谱开源的 CogVideoX,快手的 Pyramid-Flow 以及 360 推出的 FancyVideo 以及我们今天要介绍的 Genmo 开源的 Mochi 1。

m0_56144365的博客 4152

大模型应用—超强的AI 视频生成模型!完全免费开源,生成质量极高!

大模型应用—超强的AI 视频生成模型!完全免费开源,生成质量极高

优快云_430422的博客 3546

Stable diffusion 4.8.7 升级版来了!(Ai绘画无需部署,解压即用)附安装包

Stable Diffusion无疑是最近最火的AI绘画工具之一,本期设计软件库给大家带来了2024最新升级的Stable Diffusion资料包合集!比之前推送的更加智能、快速和简单2024全新Stable Diffusion 4.8.7资料包新版本使用更方便附带SD电商实战教程等资源让你快速上手如果你是零基础小白,想快速入门AI绘画是可以考虑的。一方面是学习时间相对较短,学习内容更全面更集中。二方面是可以找到适合自己的学习方案。

m0_71744960的博客 1810

Top10开源AI视频生成器测评:谁是真正的效率之王?

在AIGC(人工智能生成内容)爆发式增长的今天,正以前所未有的速度重塑创意生产流程。从静态图像到动态视频的跨越,不再依赖复杂的后期制作,而是通过“文生视频”或“图生视频”模型一键实现。其中,因其低门槛、高可控性,成为个人创作者与中小团队最关注的技术方向之一。然而,市面上开源的AI视频生成器琳琅满目,性能参差不齐,部署复杂度差异巨大。究竟哪一款真正做到了?

weixin_30598047的博客 2258

Mochi 1 视频生成模型的LoRA微调指南

Mochi 1是一个先进的视频生成模型,本指南将详细介绍如何使用LoRA(Low-Rank Adaptation)技术对其进行微调。LoRA是一种高效的参数微调方法,可以在保持原始模型大部分参数不变的情况下,仅调整少量关键参数来适应特定任务或风格。 ## 准备工作 ### 硬件要求 - 单GPU配置:推荐使用H100或A100显卡(80GB显存为佳) - 显存需求取决于视频长度:处理1秒左右

gitblog_01047的博客 854

【AI】2026年4月开源视频生成模型

这些模型大多托管在 GitHub 或 Hugging Face 上,你可以直接搜索项目名称找到代码和权重。这是对标 Sora 架构最著名的开源项目,生态非常成熟。

墨染天玑的博客 2830

详细安装和配置指南:Mochi 视频生成项目

Mochi 是一个开源的视频生成项目,它提供了一个先进的视频生成模型,具有高保真运动和强大的提示符依从性。该项目旨在缩小封闭和开放视频生成系统之间的差距,并采用 Apache 2.0 许可证发布。Mochi 模型适用于创建高质量的生成视频,并且可以通过其 API 进行程序化调用。 主要编程语言:Python ## 2. 项目使用的关键技术和框架 - **Asymmetric Diffusio

gitblog_00951的博客 1234

2026 开源视频生成模型全景图:按 9 类任务路由比按参数量选模型更可靠

2026 年开源视频生成生态从「找一个文生视频模型」分化成 9 类任务:T2V(HunyuanVideo、Wan、CogVideoX、Mochi、Open-Sora、Step-Video)、I2V(HunyuanVideo-1.5、Wan2.2、Kandinsky 5、LTX-2)、TI2V(Wan2.2-TI2V-5B,720P/24fps,Apache 2.0)、Reference-to-Video(SkyReels-V3 1–4 张参考图)、Extension / 首尾帧控制、V2V / 局部重生成(

谢谢你的喜欢 我们一起无限进步 1883
上一篇: 传神论文中心|第29期人工智能领域论文推荐
下一篇: OpenCSG致敬@全体可爱的程序员
OpenCSG
博客等级 码龄3年 1679粉丝 575原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值