PhotoWakeUp —— 创新实训（6）

最新推荐文章于 2019-10-29 10:06:29 发布
原创 最新推荐文章于 2019-10-29 10:06:29 发布 · 674 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本周实训聚焦于通过PhotoWakeUp技术求解深度图Z，以重建三维立体模型。根据阅读的论文，从已知的normal map推导每个点的深度值。过程中遇到将法线向量标准化和解超定方程组的挑战。

 

这周的任务是求出整个mask对应的深度图Z（x） 即下图的（4）

得到深度图后，下一步就可以反向构建三维立体模型

阅读了Photometric Stereo with General, Unknown Lighting论文

因为我们之前已经求出normal map

文中论述

最低0.47元/天 解锁文章
“photo wake-up”创新项目实训第二周总结
qq_38501611的博客
03-29 569
2019年3月29号 设定今周工作目标 上周我们已经可以从输出的一个二维图片输出人体的14个关节点，下一步就是研究Convolutional pose machines的输出是什么，怎么把这些输出设配到一个三维模型中。 首先我们开始研究2016年的一篇论文 keep it SMPL （F. Bogo, A. Kanazawa, C. Lassner, P. Gehler, J. Romero, a...
“photo wake up”第四周个人工作总结
weixin_41841857的博客
05-14 427
2019/04/04 上周我们已经把模型跑起来了，得到了一些参数 这些参数初步分析分别是 Cam_t ：三维相机参数 Pose：代表人体整体运动位姿和24个关节相对角度的75个参数 beta：shape个人体高矮胖瘦、头身比等比例的10个参数 f：焦点，二维数据 进一步的阅读论文和查询相关资料我们知道 （相关论文：SMPL: A Skinned Multi-Person Linear Mode...
照片唤醒-photowakeup
qq_43218657的博客
10-29 765
记录下暑假的结果
“photo wake-up”创新项目实训第一周开题总结
weixin_41841857的博客
03-22 588
项目名称：“photo wake-up”基于二维图像的三维人体模型重建 项目开始时间：2019年3月16日 项目背景： 《哈利波特》世界里有一种神奇的魔法报纸，报中照片上的人物可以动起来，看起来有点像 GIF 图。在故事里这当然是「魔法」的功劳，现实世界中还没有造出这样的报纸。我们想通过现有对图像的研究，使用AI算法，实现这个过程。华盛顿大学的几个科学家已经研究出来这样的算法，他们提出了一种使单一...
“photo wake up”第八周个人总结
weixin_41841857的博客
05-27 903
这周队友在研究根据深度图做三维模型重建的工作，我决定从动画方面入手，做从obj模型生成动画方面的内容。 maya生成骨骼动画 obj文件是3D模型文件格式。由Alias|Wavefront公司为3D建模和动画软件"Advanced Visualizer"开发的一种标准，适合用于3D软件模型之间的互导，也可以通过Maya读写。 maya中导入了smpl的人体模型后，要使这个人动起来，要附上骨骼节点 ...
PhotoWakeUp —— 创新实训（8）
TingHW的博客
05-23 1347
github地址https://github.com/HWenTing/Photo-Wake-Up 鉴于边界点等效果较差，采取两种措施 （1）使用bfs思想平滑图片。通过常识我们知道，相邻像素之间的深度值不会差别很大。从这种想法出发，选取基本点，然后用bfs方法减少相邻的像素之间的深度值差。主要代码如下 import queue # 从中心点开始，bfs向外扩展，将变化大的...
PhotoWakeUp —— 创新实训(4)
TingHW的博客
04-15 776
论文再读 ⑤ 正面的身体自遮挡部位区域填充 使用PatchMatch [4]方法 处理背部纹理是一个开放的研究问题[27,10,28]。文中给了两种方法： 1、将正面文理镜像贴到背面 2、使用可选的用户指南进行绘制。 前后纹理用泊松混合缝合[32] ⑥ 运动序列来自论文9 他们有个ui界面，可以提供纹理填充方式选择和姿态调整等功能 又与论文15提到的方法进行了对比 又与[6,1]...
PhotoWakeUp —— 创新实训（1）
TingHW的博客
03-24 3907
PhotoWakeUp —— 创新实训（1） 目录 PhotoWakeUp —— 创新实训（1） 具体工作： 遇到的问题： cpm模型： spml模型： 环境的安装： 源码阅读与修改 在本次创新实训的第一周时间里，在研读论文的基础上，主要完成了输入图片，通过cpm模型得到人体十四个主要节点的信息，处理后作为输入传递到spml模型中，并最终训练生成人物的3d模型。 具体工作...
PhotoWakeUp —— 创新实训（2）
TingHW的博客
03-31 1157
（由于时间原因，先给出了大致的总结提纲，具体内容明后天补上qnq） 这周的主要工作是将人体从背景中分割出来。 论文中提到了Mask R-CNN 和Dense CRF方法，似乎不理想 趁着这几个机会学习了instance segmentation，Semantic Segmentation的区别。找到一张十分合适的图 https://blog.youkuaiyun.com/Scythe66...
"photo wake up"第五周个人工作总结
weixin_41841857的博客
05-14 500
2019/04/10 上周我们研究出smpl模型的参数关系，知道pose和shape能直接得到一个完整的人体模型 这周我们从算法出发，跑出一个库里的smpl模型图，并得到其法线贴图，深度贴图，和蒙皮权重图 结果： 原图 smpl模型图 normal map 深度图 过程分析 法线贴图概念 为了计算光照, 我们需要使用网格的"法线". 一个表面法线是一个垂直于切线平面的向量. 简单来说, ...
“photo wake-up”第三周个人工作总结
weixin_41841857的博客
03-29 781
2019年3月29号 /马晓颖 上周我们已经可以从输出的一个二维图片输出人体的14个关节点，下一步就是研究Convolutional pose machines的输出是什么，怎么把这些输出设配到一个三维模型中。 首先我们开始研究2016年的一篇论文 keep it SMPL （F. Bogo, A. Kanazawa, C. Lassner, P. Gehler, J. Romero, andM....
python opencv 增强对比度
热门推荐
TingHW的博客
11-29 2万+
import cv2 import numpy as np from matplotlib import pyplot as plt img=cv2.imread('miao.jpg',0) hist=cv2.calcHist([img],[0],None,[256],[0,256]) 这是我们的测试图片，看起开一片漆黑，但实际上是有只小猫的，随后我们可以看到 # 绘制直方图 # 使用Mat...
python opencv 卡通化图片
TingHW的博客
11-29 2万+
import cv2 def cartoonise(picture_name): imgInput_FileName = picture_name imgOutput_FileName = "cartoon" + picture_name num_down = 2 #缩减像素采样的数目 num_bilateral = 7 #定义双边滤波的数...
python opencv histogram_直方图
TingHW的博客
11-27 2万+
histogram给出图像的密度分布的总体概念，它的x轴是像素值（0到255）y轴是对应的像素在图像里的数量。 cv2.calcHist()函数 cv2.calcHist(images, channels, mask, histSize, ranges[,hist[,accumulate]]) 1.images:这是uint8或者float32的原图。应该是方括号方式传入：“[img]” 2.ch...
python opencv 分水岭算法对图像进行分割
TingHW的博客
11-28 1万+
import numpy as np import cv2 from matplotlib import pyplot as plt img = cv2.imread('coin.jpg') gray = cv2.cvtColor(img,cv2.COLOR_BGR2GRAY) ret, thresh = cv2.threshold(gray,0,255,cv2.THRESH_BINARY_IN...
python opencv 提取特殊颜色物体
TingHW的博客
11-29 1万+
import cv2 import numpy as np img = cv2.imread('xiaoyuanka.jpg') HSV = cv2.cvtColor(img, cv2.COLOR_BGR2HSV) H, S, V = cv2.split(HSV) LowerBlue = np.array([100, 100, 50]) UpperBlue = np.array([130, 2...
python opencv 特征匹配特征匹配+Homography找目标
TingHW的博客
11-29 1万+
我们之前使用了查询图像，找到其中的一些特征点，我们取另外一个训练图像，找到里面的特征，我们找到它们中间最匹配的。简单说就是我们在一组图像里找一个目标的某个部分的位置。 我们可以使用一个calib3d模块里的函数，cv2.findHomography().如果我们传了两个图像里的点集合，它会找到那个目标的透视转换。然后我们可以使用cv2.perspectiveTransform()来找目标，它需要至...
python opencv SURF(加速稳健特征）
TingHW的博客
11-28 1万+
opencv3相对文档来说有一些变化 surf sift等算法 属性值改为set get 调用改为 cv2.xfeatures2d.SURF_create import cv2 img = cv2.imread('meixi.jpg',0) surf = cv2.xfeatures2d.SURF_create(400) kp, des = surf.detectAndCompute(img,No...
python opencv 图片 基本操作
TingHW的博客
11-25 1万+
# 你可以通过行和列坐标访问一个像素值。对于BGR图片，它会返回一个蓝，绿，红值的数组。对于灰度图片，只会返回对应的深度。 import cv2 import numpy as np img = cv2.imread('touxiang.jpg') # 访问和修改像素值 px = img[100,100] print(px) [224 240 239] # 设置和获取某一像素值 img.i...
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值