LivePortrait:有点好玩的!

快手开源LivePortrait,实现表情姿态极速迁移,GitHub 6.5K Star 近日,快手可灵大模型团队开源了名为LivePortrait的可控人像视频生成框架,能够准确、实时地将驱动视频的表情、姿态迁移到静态或动态人像视频上,生成极具表现力的视频结果。 阅读详情

近日,快手和复旦大学、中科大共同研发的 LivePortrait 开源了。这同样是一款图生视频的大模型。提供一张正脸照,一段视频,照片上的人物就会栩栩如生的模仿视频中的表情了。

图片

不知道大家有没有用过苹果的拟我表情,就是那个你可以选择一个动物或者其他东西的贴纸,然后录制一小段视频,贴纸角色会模仿你的口型。LivePortrait 实现的其实和这个功能差不多。其实这类数字人项目我们也介绍过很多,不过这次的 LivePortrait 是国产团队研发的,性能也很不错,生成视频超快。

通过扩展训练数据到约 6900 万高质量帧和采用混合图像视频训练策略,LivePortrait 能够更好地泛化,适应更多不同类型的输入数据。此外,LivePortrait 利用紧凑的隐式关键点代表混合形状,并设计缝合和重定向模块,这些模块使用计算开销极小的小型MLP,从而增强了对生成动画的控制能力。

甚至经过微调,你可以让小动物们模仿人的表情!

图片

项目的部署也比较简单,首先克隆仓库,使用conda创建虚拟环境,安装所需的依赖项和FFmpeg。然后下载模型的权重文件,放到相应的目录,通过脚本运行即可。当然,如果你缺少一些相应的算力或是嫌部署过于麻烦,你也可以通过 HuggingFace 在线使用。感兴趣的小伙伴可以自行体验看看。

在线体验地址:

https://huggingface.co/spaces/KwaiVGI/LivePortrait

项目地址:

https://github.com/KwaiVGI/LivePortrait

LivePortrait 数字人:开源的图生视频模型,本地部署和专业视频制作详细教程 数字人最近比较火,LivePortrait 是快手、中科大和复旦大学联合研发的开源的图生视频模型,比较适合个人、小团体和企业等用于生成自己的数字化人物视频。老牛同学尝试通过本教程,详细介绍如何在本地部署和生成专业视频…… 阅读详情

相关推荐

开源的人像动画生成工具LivePortrait

LivePortrait是一项革新性的图像动画技术,它基于摄像头驱动,通过高效的肖像动画算法,利用隐式关键点框架来平衡计算效率和可控性,从而实现将静态图像转换为实时动态视频的效果。与传统的扩散模型不同,LivePortrait采用了基于隐式关键点的创新框架,这种方法显著提升了计算效率,同时保持了高度的生成质量和可控性。该技术的核心在于其两阶段训练流程:第一阶段训练基础模型,包括外观提取器、运动提取器、变形模块和解码器;第二阶段则专注于优化拼接和重定向模块,以提供对眼睛和嘴唇等面部特征的精细控制。

xuweilin的博客 1352

保姆式教学如何安装使用LivePortrait

LivePortrait是一个开源项目,通过深度学习技术将静态图像转换为动态视频,为用户提供逼真的面部表情和运动效果。

weixin_44259499的博客 5960

AIGC前沿 | LivePortrait

LivePortrait的一个关键创新是设计了紧凑的隐式关键点来有效表示一种隐式混合形状,并通过小型多层感知器(MLP)网络实现对眼睛和嘴唇动作的精细控制,这些控制模块的计算开销可以忽略不计。此外,该框架还包括一个拼接模块,用于无缝地将动画合成回原始图像空间,处理更大的图像尺寸和多人图像。

AI-cv-sharer 1938

最新爆火的开源AI项目 | LivePortrait 本地安装教程

LivePortrait 本地部署教程,强大且开源的可控人像AI视频生成

五指山的网络员 5579

LivePortrait - 让肖像栩栩如生

视频驱动肖像动画框架,专注于更好的泛化性、可控性和实际使用的效率。为了提高生成质量和泛化能力,我们将训练数据扩展到约 6900 万个高质量帧,采用混合图像 - 视频训练策略,升级网络架构,并设计更好的运动变换和优化目标。

1322

Python RPA 流程自动化快速上手

Python RPA 流程自动化快速上手

看花容易绣花难 1万+

[LivePortrait] LivePortraitPipeline

现在已揭开LivePortrait"引擎室"的奥秘 LivePortraitPipeline(及LivePortraitPipelineAnimal)是遵循精确多步配方的主协调器,将静态图像赋予生命。从输入加载到数据准备、动作提取,最终利用强大AI模型生成动画帧,这条管线承担了所有繁重工作。 我们了解到它将任务委托给Cropper和LivePortraitWrapper等专用工具,使整个过程高效且模块化。

No Game No Life 910

STM32-DAC定时器触发三角波生成【频率与幅度精准控制】

本文详细介绍了STM32 DAC定时器触发三角波生成的原理与实现方法,涵盖硬件配置、频率与幅度精准控制技巧及代码实现。通过定时器触发DAC模块,可灵活调节三角波的频率和幅度,适用于信号发生器等高精度应用场景。

weixin_29161785的博客 455

LivePortrait人像动画:让静态肖像瞬间活起来

想要将一张普通的照片变成生动的动画视频吗?LivePortrait正是你需要的工具!这款开源的AI人像动画工具能够将静态肖像照片转化为栩栩如生的动画视频,无论你是想为社交媒体制作有趣内容,还是为视频创作添加创意元素,LivePortrait都能轻松实现。 ## 为什么选择LivePortrait?三大核心优势解析 ### 🎯 简单易用的操作界面 LivePortrait提供了直观的图形界面,

gitblog_00988的博客 836

最新 抖音 X-Gorgon 0408 和8408 设备注册协议

抖音app先是检测了你的手机cpu架构,是x86还是armeabi,通过cpu架构的不同来调用so内不同的xg方法,所以导致现在最新版抖音app的xg算法有0408和8408两种。两种都是最新版,因为我发现当我使用oppo手机安装最新版抖音抓包的xg是8408,而当我用小米或者华为安装最新版抖音,抓包以后发现xg是0408。抖音IOS XG84 设备注册激活协议代码片段。...

Q44804487的博客 1万+

Acer宏碁暗影骑士擎AN515-58原厂系统恢复指南:从ISO镜像到完整出厂设置

本文详细介绍了为Acer宏碁暗影骑士擎AN515-58游戏本恢复原厂系统的完整指南。从准备工作、数据备份到下载官方镜像、制作恢复U盘,再到BIOS设置与恢复流程,一步步教你如何将系统完整还原至出厂状态,确保所有硬件驱动、NITROSENSE控制中心等专属优化功能恢复正常,解决系统卡顿、功能异常等问题。

weixin_29271263的博客 1108

LivePortrait完整指南:轻松将静态照片变成动态肖像的终极教程

想要让静态人像照片动起来吗?LivePortrait正是你需要的工具。这款基于深度学习的开源人像动画工具,能够将普通照片转化为生动的动态肖像,支持人类和动物肖像动画,让你轻松实现创意表达。 ## 什么是LivePortrait?为什么选择它? **LivePortrait**是一款强大的人像动画生成工具,通过先进的姿态迁移和面部特征捕捉技术,为开发者和创作者提供了专业的肖像动画解决方案。在过去

gitblog_00326的博客 810

BMW Standard Tools 宝马FSC工具套装下载

这是一款非常专业的一套宝马编码工具,懂行的人自然知道他的用处,不懂行的人,我解释再多也不会明白的,需要的拿去吧。软件名:BMW Standard Tools包含工具:BMW Coding Tool v2.50、change Language、CIC Mafia、Dr.Gini B021、EasyConnect、EDIABAS Konfigurator v1.1、EDIABAS Konfigurator v2.0.0、FSC-Tools_2.18、FSTool_v2_CarServer、INPA、ITool

Zj_arrow的博客 7011

LivePortrait:从静态肖像到动态表情的AI魔法

想象一下,你有一张静态的肖像照片,只需一个驱动视频或简单的表情参数,就能让照片中的人物"活"起来——眨眼、微笑、转头,甚至说话。这就是LivePortrait带给你的神奇体验,一个由快手科技团队开发的高效人像动画生成工具。 LivePortrait的核心价值在于它的高效性和易用性。与传统的复杂动画制作流程不同,LivePortrait通过深度学习技术实现了"一键式"人像动画生成。无论是个人创作者

gitblog_00459的博客 1064

第133章 PCL OrientedBoundingBox 有向包围盒

中文叫有向包围盒,是一种旋转过的包围盒。特点:不像AABB那样固定朝向坐标轴能更紧密地包裹物体适用于复杂姿态的物体,比如倾斜、旋转的物体通常通过PCA、惯性矩等算法确定方向。

yumeiguo的博客 265

模型泛化能力提升:领域自适应与迁移学习

模型泛化能力提升:领域自适应与迁移学习​ ,人工智能,计算机视觉,大模型,AI,在机器学习和深度学习的应用中,模型的泛化能力是一个关键问题。泛化能力指的是模型在新的、未见过的数据上表现良好的能力。然而,实际情况中,训练数据和测试数据往往来自不同的领域,存在分布差异,这会导致模型的泛化能力下降。领域自适应与迁移学习正是为了解决这一问题而发展起来的重要技术。

不踩坑,不知道坑有多深;不总结,踩过的坑白踩。 3万+

LivePortrait终极指南:如何快速掌握这款强大的人像动画工具

LivePortrait是一款基于深度学习的开源人像动画工具,能够将静态图像转换为逼真的动态肖像。无论你是内容创作者、设计师还是AI爱好者,这款工具都能为你的作品注入生命,让静态照片"活"起来!😊 ## ✨ 项目亮点与核心价值 **为什么选择LivePortrait?** 这里有几个让你爱不释手的理由: | 功能特色 | 实际价值 | |---------|---------| | 🎭

gitblog_00401的博客 968

论文必备 - YOLOv12热力图可视化,支持指定模型,指定显示层,设置置信度,以及10种可视化实现方式

本文带来的是YOLOv12热力图可视化功能,支持,以及。我们经常看到一些论文里绘制了不同的热力图,一方面能够直观的感受其模型的有效性,另一方面也丰富了论文内容。特别是在使用了注意力模块的网络中,热力图就可以验证注意力机制是否真正聚焦到了预期的重要特征上,以便对模型的有效性和合理性进行评估。例如这篇文章中展示的,就很能够表达作者改进后的模型相比之前模型的优越性。

Limiiiing的博客 1707

AI表情神同步!LivePortrait安装配置,一键包,使用教程

LivePortrait 是一款由快手团队开发的高效肖像动画工具,通过隐式关键点框架,从静态图像生成动态视频。该工具可以让用户通过驱动视频生成逼真的面部表情和头部动作。这款工具不仅可以用于人脸动画,还能扩展到动物肖像,提供了广泛的应用场景。该项目主页核心介绍其实就一句话“!” 可以理解为让“ 将肖像变得栩栩如生!下面先简单说一下这个项目的特点,然后分享一下本地安装方法,最后是一件包和使用方法!

托尼不是塔克 3493

NTscan扫描工具

ntscan是一个扫描器,可以扫描没有密码和弱密码的共享,先到配置文件中填写猜测的用户名和密码,扫描过程中右侧出现的是扫描日志。

蓝牙模块HM-10手册

蓝牙模块HM-10手册,该手册对蓝牙模块HM-10进行了详细的介绍和使用方法以及一些AT指令。

SOAR 双环境集成配置指南:线上环境与测试环境的角色划分与实战部署

SOAR(SQL Optimizer And Rewriter)是小米开源的智能 SQL 优化与改写工具,它通过**线上环境(Online DSN)与测试环境(Test DSN)双库协同**的架构,在真实元数据、真实执行计划与可控的模拟执行之间取得平衡,从而输出可靠的索引建议与 EXPLAIN 分析。本文以 [doc/environment.md](https://link.gitcode.com

gitblog_00738的博客 1025

STM32F407中文手册

STM32f407中文手册 本参考手册面向应用开发人员,提供有关使用 STM32F405xx/07xx、STM32F415xx/17xx、 STM32F42xxx 和 STM32F43xxx 微控制器存储器与外设的完整信息。STM32F405xx/07xx、STM32F415xx/17xx、STM32F42xxx 和 STM32F43xxx 构成一个微 控制器系列,各产品具有不同的存储器大小、封装和外设。有关订购信息以及器件的机械与电气特性,请参见数据手册。有关 ARM Cortex™-M4F 内核的信息,请参见《Cortex™-M4F 技术参考手册》。

LivePortrait完整指南:如何将静态肖像变为生动动画

LivePortrait是一款基于深度学习的开源人像动画工具,能够将静态图像转换为逼真的动态肖像。通过先进的姿态迁移和面部特征捕捉技术,该工具为开发者和创作者提供了强大的人像动画生成能力。无论你是内容创作者、开发者还是技术爱好者,这篇完整指南将帮助你快速掌握这个创新工具。 ## 什么是LivePortrait人像动画技术? LivePortrait是一个高效的肖像动画解决方案,它结合了缝合和重

gitblog_00147的博客 929

VB摄像头监控

该VB模块可对摄像头捕获的画面进行录像等,可在创建的窗口进行控制

LivePortrait部署指南:3个核心挑战与突破方案

LivePortrait作为高效的人像动画工具,能够将静态肖像转化为生动的动态效果,为数字内容创作带来革命性改变。本文将围绕**人像动画**这一核心关键词,解决技术爱好者和初级开发者在部署过程中遇到的三个主要挑战,提供从环境配置到动画生成的完整解决方案。我们将重点关注**本地部署**、**模型下载**和**跨平台兼容性**等关键问题。 ## 挑战一:环境配置复杂?跨平台一键部署方案 许多开发者

gitblog_00163的博客 697

如何用LivePortrait让静态照片动起来:完整人像动画指南

想让你的照片活起来吗?LivePortrait是一个开源的人像动画工具,能够将静态肖像转化为生动的动态视频。无论是人物照片还是宠物照片,都能通过这个强大的AI工具获得生命。在本文中,我将为你详细介绍如何快速上手LivePortrait,从环境配置到实际应用,一步步教你制作令人惊艳的人像动画。 ## LivePortrait是什么? LivePortrait是一个基于深度学习的**人像动画生成工

gitblog_00397的博客 620

效果惊人!LivePortrait开源数字人技术,让静态照片生动起来

感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。

程序员小麦的博客 1242

LivePortrait实战全流程:从静态人像到动态肖像的AI魔法揭秘

在数字内容创作飞速发展的今天,如何让静态照片"活"起来成为创作者们的新追求。LivePortrait作为一款开源的肖像动画工具,通过先进的深度学习技术,实现了将单张人像照片转化为逼真动态视频的神奇效果。本文将带您深入了解这项技术的工作原理,并手把手教您掌握从基础部署到高级应用的全套技能。 ## 第一章:为什么我们需要肖像动画技术? 想象一下,您手机里那些珍贵的照片——家人的笑脸、宠物的可爱瞬间

gitblog_00682的博客 957
上一篇: KeyDB:多线程redis就绪!!
下一篇: Cradle:替代人手的惊艳框架!!
架构文摘JGWZ
博客等级 码龄5年 8808粉丝 345原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值