“photo wake-up”创新项目实训第二周总结

PhotoWakeUp —— 创新实训(8) github地址https://github.com/HWenTing/Photo-Wake-Up 鉴于边界点等效果较差,采取两种措施 (1)使用bfs思想平滑图片。通过常识我们知道,相邻像素之间的深度值不会差别很大。从这种想法出发,选取基本点,然后用bfs方法减少相邻的像素之间的深度值差。主要代码如下 import queue # 从中心点开始,bfs向外扩展,将变化大的... 阅读详情

2019年3月23日
/马晓颖

 

这周从已有的二维图像姿态预测的算法出发,参考论文Convolutional pose machines的算法进行二维姿态预测,得出人体14个关节点的位置。

(S.-E. Wei, V. Ramakrishna, T. Kanade, and Y. Sheikh. Convolutional pose machines. In Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition, pages 4724–4732, 2016)

1.算法研究部分
cpm是CMU开源项目OpenPose的前身,目前在MPII竞赛single person中排名第七。
Pose estimation任务属于FCN的一种,输入是一张人体姿势图,输出n张热力图,代表n个关节的响应。

Pose estimation任务属于FCN的一种,输入是一张人体姿势图,输出n张热力图,代表n个关节的响应。
 

输出热力图

CPM网络结构如下图所示,X代表了经典的VGG结构,在每个stage末用1✖️1卷积输出heatmap,与label计算loss(中间监督)。
 

在这里插入图片描述

.Stage 1 input是原图,经过全卷机网络,输出是一个P+1层的2Dmap

Stage 2 input是 StageOutput做处理,并且加上 原图通过几层网络后的中层map。输出同上。

Stage t>2 类似2
(这里相加的话会有一些尺度问题,应该是ψ中操作了,但论文中没有解释ψ。)## 2.用

2.运行准备
环境:windows10+TensorFlow1.4.0+opencv+python3.5
(下载TensorFlow库费了不少劲)

下载官方models放进models/weigh文件夹下

修改几个DEMO_TYPE,输入图片
修改在cpu上运行

运行_cpm_body.py
 

在这里插入图片描述

结果还不错

在这里插入图片描述

公众号:计算机视觉与图形学实战

 

第18届全国大学生智能汽车竞赛四轮车开源讲解【2.5】-- 图像处理实战:从二值化到边缘检测的工程优化 本文深入讲解了第18届全国大学生智能汽车竞赛四轮车开源项目中图像处理的核心实战技术。文章聚焦于二值化与边缘检测两大关键环节,详细对比了大津法与索贝尔算子的工程应用与优化策略,并分享了遮光、偏振片等物理抗干扰技巧,旨在帮助参赛者构建稳定高效的图像预处理流水线,为赛道识别奠定坚实基础。 阅读详情

相关推荐

VMFS数据存储(datastore)丢失后恢复步骤

vmfs datastore恢复步骤

jetliu05的博客 3272

人体姿态识别研究综述(详细归纳!)

一,人体姿态识别数据集 1,2D数据集: LSP 地址:http://sam.johnson.io/research/lsp.html 样本数:2K 关节点个数:14 全身,单人 FLIC 地址:https://bensapp.github.io/flic-dataset.html 样本数:2W 关节点个数:9 全身,单人 MPII 地址:http://human-pos...

qq_38522972的博客 7万+

使用 Python 获取网络数据

本文介绍了 Python 获取网络数据、使用 requests 库、编写爬虫代码以及使用 IP 代理的方法。Python 的 requests 库非常方便,可以帮助我们快速访问网络资源。编写爬虫程序需要掌握正则表达式、HTTP 协议等知识,同时需要注意爬取速度和频率,以避免对被爬取网站造成负担。最后,使用 IP 代理可以帮助我们隐匿身份,保护我们的网络安全。

互联说 2699

[论文学习]Mask R-CNN

正文: 摘要 我们提出了一个概念上简单、灵活以及通用的目标实例分割框架。我们的方法有效地检测图像中的目标,同时为每一个实例生成高质量的分割掩模。这种叫Mask R-CNN的方法通过添加一个与现有边框识别分支并行的、用于预测目标掩模的分支来扩展Faster R-CNN。Mask R-CNN训练简单,相对于Faster R-CNN只增加了很小的开销,运行速度在5fps。此外,Mask ...

m0_37644085的博客 614

从零开始:在Ubuntu 22.04上配置Isaac Gym Preview 3环境(含常见错误解决方案)

本文提供了在Ubuntu 22.04系统上从零开始配置Isaac Gym Preview 3环境的完整实战指南。内容涵盖NVIDIA驱动安装、Conda环境搭建、CUDA与PyTorch版本精准匹配、Isaac Gym核心安装与验证,并重点介绍了针对四足机器人等复杂系统的强化学习训练环境配置、常见错误解决方案及性能调优技巧,旨在帮助开发者高效部署这一高性能物理仿真平台。

weixin_29048775的博客 393

【扫地机器人】详细介绍扫地机器人软硬件测试和场景化测试

本文提出2025版扫地机器人全生命周期测试方案,涵盖实验室仿真、硬件台架、客户实景等全流程验证。测试以"清洁率≥95%、覆盖率≥98%、MTBF≥1000h"为核心指标,采用数字孪生与120套真实场景结合的双V模型。重点包括:传感器精度(LDS误差<±10mm)、清洁系统性能(10g粉尘吸入率≥99%)、动力续航(800次循环容量保持≥80%)等硬件测试;以及SLAM重定位(误差<5cm)、AI识别(mAP>92%)等软件验证。方案特别针对宠物家庭(毛发缠绕率≤3%)、

2501_92897788的博客 2289

照片唤醒-photowakeup

记录下暑假的结果

qq_43218657的博客 801

基于 CodeMirror 6 与 Vite 构建极简在线代码编辑器的核心原理与实践

在线代码编辑器是前端开发领域的重要工具,它允许开发者在浏览器中直接编写、运行和调试代码。其核心原理通常基于成熟的编辑器内核(如 CodeMirror 或 Monaco Editor)与实时预览技术,通过 iframe 沙箱实现代码的安全执行。这类技术的核心价值在于提供了轻量级、可嵌入、零配置的编码环境,极大地提升了代码演示、教学、快速原型验证的效率。在实际应用中,它常被集成到技术文档、在线教程和协作平台中,用于创建可交互的示例。本文以 **CodeMirror 6** 和 **Vite** 构建的极简编辑器

weixin_30652491的博客 337

“photo wake-up”创新项目实训第一周开题总结

项目名称:“photo wake-up”基于二维图像的三维人体模型重建 项目开始时间:2019年3月16日 项目背景: 《哈利波特》世界里有一种神奇的魔法报纸,报中照片上的人物可以动起来,看起来有点像 GIF 图。在故事里这当然是「魔法」的功劳,现实世界中还没有造出这样的报纸。我们想通过现有对图像的研究,使用AI算法,实现这个过程。华盛顿大学的几个科学家已经研究出来这样的算法,他们提出了一种使单一图片中的人物动起来的方法,图中的人物在三维场景下可以行走,奔跑,坐下或跳跃。 官方表示成果:https://

CSS360的博客 222

Jetson Orin Nano GPIO 实战,用 devmem 玩转 Pinmux 引脚复用配置

devmem 是一个直接读写寄存器的工具,通过 mmap 将 /dev/mem 中的物理地址区域映射到用户空间进程地址空间,从而实现直接读写,正常情况下在 /dev 下可以看到 mem。可以看到对应 bit5 bit6 分别为 1,对应配置为 E_IO_HV 为 ENABLE 以及 E_INPUT 为 ENABLE。需要 TRM 手册查看相关寄存器,以及安装 busybox,busybox 内置了 devmem。根据 TRM 手册,找到 I2C_SDA 的 pinmux 地址偏移是 0x18。

darcsdn 1650

手把手教你用Isograph Reliability Workbench 14.0绘制可靠性方框图(RBD)

本文详细介绍了如何使用Isograph Reliability Workbench 14.0绘制可靠性方框图(RBD),从软件安装、界面设置到基础项目创建和高级功能应用,手把手指导工程师完成系统可靠性分析。通过实际案例演示,帮助用户掌握RBD建模技巧,提升系统可靠性评估效率。

weixin_26765287的博客 636

“photo wake-up”创新项目实训第一周总结

2019年3月23日 这周从已有的二维图像姿态预测的算法出发,参考论文Convolutional pose machines的算法进行二维姿态预测,得出人体14个关节点的位置。 (S.-E. Wei, V. Ramakrishna, T. Kanade, and Y. Sheikh. Convolutional pose machines. In Proceedings of the IEEE C...

qq_38501611的博客 775

基于瑞芯微RK3562 四核 ARM Cortex-A53 + 单核 ARM Cortex-M0——Linux应用开发手册

本文主要介绍TL3562-MiniEVM评估板的AMP(Asymmetric Multi-processing)开发案例,介绍基于Linux + RT-Thread(RTOS)、Baremetal的AMP案例的开发环境搭建。

创龙,嵌入式一体化解决方案商 412

“photo wake-up”创新项目实训开题总结

项目名称:“photo wake-up”基于二维图像的三维人体模型重建 项目开始时间:2019年3月16日 项目团队名称:Photo magician 团队成员:和树钰 马晓颖 乔艺萌 丁昊 项目背景: 《哈利波特》世界里有一种神奇的魔法报纸,报中照片上的人物可以动起来,看起来有点像 GIF 图。在故事里这当然是「魔法」的功劳,现实世界中还没有造出这样的报纸。我们想通过现有对图像的研究,使用...

qq_38501611的博客 636

Data-Structures-and-Algorithm-Analysis-in-Java.pdf

作者: Weiss, Mark A. 出版社: Addison Wesley Data Structures and Algorithm Analysis in Java is an “advanced algorithms” book that fits between traditional CS2 and Algorithms Analysis courses. In the old ACM Curriculum Guidelines, this course was known as CS7. This text is for readers who want to learn good programming and algorithm analysis skills simultaneously so that they can develop such programs with the maximum amo...

假人有限元模型

假人模型,车辆碰撞假人有限元模型,适合做乘员安全的研究者利用

“photo wake up”第四周个人工作总结

2019/04/04 上周我们已经把模型跑起来了,得到了一些参数 这些参数初步分析分别是 Cam_t :三维相机参数 Pose:代表人体整体运动位姿和24个关节相对角度的75个参数 beta:shape个人体高矮胖瘦、头身比等比例的10个参数 f:焦点,二维数据 进一步的阅读论文和查询相关资料我们知道 (相关论文:SMPL: A Skinned Multi-Person Linear Mode...

weixin_41841857的博客 459

Outlook Express 6 (OE6) for Win7/Win8/Win10

英文版 Outlook Express6.0, 兼容Win7/Win10/WinXP,解压就可用。

“photo wake up”第八周个人总结

这周队友在研究根据深度图做三维模型重建的工作,我决定从动画方面入手,做从obj模型生成动画方面的内容。 maya生成骨骼动画 obj文件是3D模型文件格式。由Alias|Wavefront公司为3D建模和动画软件"Advanced Visualizer"开发的一种标准,适合用于3D软件模型之间的互导,也可以通过Maya读写。 maya中导入了smpl的人体模型后,要使这个人动起来,要附上骨骼节点 ...

weixin_41841857的博客 946

Devexpress16.2.6破解工具

Devexpress16.2.6破解工具Devexpress16.2.6破解工具Devexpress16.2.6破解工具Devexpress16.2.6破解工具

“photo wake-up”第三周个人工作总结

2019年3月29号 /马晓颖 上周我们已经可以从输出的一个二维图片输出人体的14个关节点,下一步就是研究Convolutional pose machines的输出是什么,怎么把这些输出设配到一个三维模型中。 首先我们开始研究2016年的一篇论文 keep it SMPL (F. Bogo, A. Kanazawa, C. Lassner, P. Gehler, J. Romero, andM....

weixin_41841857的博客 819

"photo wake up"第五周个人工作总结

2019/04/10 上周我们研究出smpl模型的参数关系,知道pose和shape能直接得到一个完整的人体模型 这周我们从算法出发,跑出一个库里的smpl模型图,并得到其法线贴图,深度贴图,和蒙皮权重图 结果: 原图 smpl模型图 normal map 深度图 过程分析 法线贴图概念 为了计算光照, 我们需要使用网格的"法线". 一个表面法线是一个垂直于切线平面的向量. 简单来说, ...

weixin_41841857的博客 531

“photo wake up"第六周个人总结

2019/4/17 上周我们得出smpl模型的法线图,深度图后,我们就要进行对smpl的轮廓和原图轮廓进行匹配了 1.得到smpl的黑白轮廓图mask 和原图的黑白轮廓图mask 使用抠图算法和opencv库的图像分割 2.求出原图mask与smpl.mask的对应关系 对应关系的含义:原图中每一个像素点寻找其对应在smpl像素点中的一个f(x) 3.求解f(x) 参考论文: M. S. F...

weixin_41841857的博客 633

“photo wake up”第七周个人总结

这周我们要对得到的smpl法线图,蒙皮图进行warp 对于我们上周得到的f(x) 具体详看https://blog.youkuaiyun.com/weixin_41841857/article/details/90574160 我们进行要给这样的变化 对法线贴图N(x) 对深度贴图有两种变化方法 ①直接通过warp得到 结果: 但是文章说这种方法会使重建出来的人体更扁平 ②结合法线值做integrat...

weixin_41841857的博客 441

PhotoWakeUp —— 创新实训(6)

这周的任务是求出整个mask对应的深度图Z(x) 即下图的(4) 得到深度图后,下一步就可以反向构建三维立体模型 阅读了Photometric Stereo with General, Unknown Lighting论文 因为我们之前已经求出normal map 文中论述了怎样由normal map(即每个点的法线向量)递推得到每个点的z(x,y)值 遇到的问题...

TingHW的博客 700

PhotoWakeUp —— 创新实训(4)

论文再读 ⑤ 正面的身体自遮挡部位区域填充 使用PatchMatch [4]方法 处理背部纹理是一个开放的研究问题[27,10,28]。文中给了两种方法: 1、将正面文理镜像贴到背面 2、使用可选的用户指南进行绘制。 前后纹理用泊松混合缝合[32] ⑥ 运动序列来自论文9 他们有个ui界面,可以提供纹理填充方式选择和姿态调整等功能 又与论文15提到的方法进行了对比 又与[6,1]...

TingHW的博客 816
上一篇: “photo wake-up”创新项目实训第一周开题总结
下一篇: “photo wake-up”第三周个人工作总结
元宇宙MetaAI
博客等级 码龄10年 331粉丝 333原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值