基于visual-hull算法的图像三维重建matlab仿真

简介: 基于visual-hull算法的图像三维重建matlab仿真

1.算法仿真效果
matlab2022a仿真结果如下:

6272d114c0c75242a0b3a3d3b79537c7_watermark,size_14,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_20,type_ZmFuZ3poZW5naGVpdGk=.png
1650c1b141f55b394556f3511c63973a_watermark,size_14,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_20,type_ZmFuZ3poZW5naGVpdGk=.png
b284501758f6d0c70a0fd06a9cf07b3d_watermark,size_14,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_20,type_ZmFuZ3poZW5naGVpdGk=.png
7d4b4fae3e396d3968231225e394ead6_watermark,size_14,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_20,type_ZmFuZ3poZW5naGVpdGk=.png

2.算法涉及理论知识概要
visual hull用于简单、快速地获取三维模型。目前,获取三维模型的方式有:
利用传统几何构造技术直接构造模型.利用三维扫描设备对真实物体进行扫描,进而重建出模型.利用从各个视角拍摄的真实物体的多幅图像重建模型.由图像重建三维模型技术又可分为两类:一类是通过多幅深度图像重建模型,另一类是通过多幅照片生成物体的可见外壳visual hull.
Laurentini 最早提出了可见外壳(visual hulls )的概念,即可见外壳就是由空间物体的所有已知侧影轮廓线决定的该物体的凸包,是一种由形状到轮廓的3D重建技术来构建几何对象。具体方法是,假定场景中的前景物体可以和背景相分离。基于这样的假设,原始图像可以经过阈值化前/背景二值图像,得到轮廓图像(silhouette image)。前景掩膜,所谓的轮廓,是相应3D前景物体的2D投影。伴随着相机外参,轮廓定义了反向投影的通用椎体,该锥体包含这个前景物体。
当利用透视投影的方式从多个视角观察某一空间物体时,在每一个视角上都会得到一条该物体的侧影轮廓线。这条侧影轮廓线和对应的透视投影中心将共同决定一个三维空间中一般形状的锥体,轮廓椎体(silhouette cone)。而由所有已知侧影轮廓线和对应的透视投影中心决定的锥体的intersection相交点,最终将决定一个包含该物体的凸包,即物体的可见外壳。在多数情况下,空间物体的可见外壳是该物体的合理逼近.

  Visual hull(可视外壳)是由Laurentini引入的有形状到轮廓的3D重建技术构建的几何实体。这种技术假定场景中的前景物体可以和背景相分离。基于这样的假设,原始图像可以经过阈值化处理成前/背景二值图像,我们将这种图像称作轮廓图像(silhouette image)。所谓的轮廓,是相应3D前景物体的2D投影。伴随着相机观看参数,轮廓定义了后向投影的涵盖实际物体的通用锥体。这个锥体被称作轮廓锥体(silhouette cone)。两个锥体相交的地方被称作可视外壳,它是实际3D物体的几何边界。

  所以说,可视外壳就是由空间物体的所有已知侧影轮廓线决定的该物体的凸包。当利用透视投影的方式从多个视角观察某一空间物体时,在每一个视角上都会得到一条该物体的侧影轮廓线。这条侧影轮廓线和对应的透视投影中心将共同决定一个三维空间中一般形状的锥体。显然,该物体必将落于这个锥体之内;而由所有已知侧影轮廓线和对应的透视投影中心决定的锥体的交最终将决定一个包含该物体的凸包,这个凸包就是物体的可视外壳。在多数情况下,空间物体的可视外壳是该物体的合理逼近。

  Martin和Aggarwal 最早提出了用多幅照片生成可视外壳的方法。他们利用真实物体在照片上的侧影轮廓线和相关的相机参数实现了物体的三维重建。Chien等人采用八叉树结构来表示物体的可视外壳。这种八叉树结构是通过预先在平行投影照片上生成表示物体的四叉树的基础上建立的。Potmesil和Szeliski同样建立了可视外壳的八叉树表示,但输入改为从任意视角拍摄的透视投影照片。Garcia 等人也提出了一种改进的八叉树表示方法。

3.MATLAB核心程序```object_points3D = [voxels(:,1)'; voxels(:,2)'; voxels(:,3)'; ones(1, length(voxels))];
voxels(:, 4) = zeros(size(voxels(:, 4)));
voxel_inds = {};
img_vals = {};
dmin = depth_range(1);
dmax = depth_range(2);
img_size = size(silhouettes);
for i = 1:size(M,3)
r = M(1:3, 1:3, i);
t = M(1:3, 4, i);
if t == [0;0;0]
continue;
end

center = [-(r')* t; 1]; 

cam_center = repmat(center, 1, size(object_points3D,2));

KM = [K]*M(1:3, 1:4, i);

points2D = KM*object_points3D;
points2D = points2D./[points2D(3,:); points2D(3,:); points2D(3,:)];

cur_silhouette = silhouettes(:,:,i);

pixThresh = mean(cur_silhouette(:)) + std(cur_silhouette(:));
cur_mask = cur_silhouette > pixThresh;
saliencyFlag = zeros(1,size(points2D,2),'logical');
for ii = 1:size(points2D,2)
    if points2D(2,ii) > 1 && points2D(2,ii) < img_size(1) && ...
       points2D(1,ii) > 1 && points2D(1,ii) < img_size(2)
        saliencyFlag(ii) = cur_mask(round(points2D(2,ii)),round(points2D(1,ii)));
    end
end

saliencyFlag = ones(1,size(points2D,2),'logical');

d = sqrt(sum((cam_center - object_points3D).^2, 1));
pts_ind = find(... %d > dmin & d < dmax ...
    points2D(2,:) > 1 & points2D(2,:) < img_size(1) ...
    & points2D(1,:) > 1 & points2D(1,:) < img_size(2) ...
    & saliencyFlag);

 pi = points2D(1,pts_ind);
 pj = points2D(2,pts_ind);


[img_val, ind, object_points_cam] = GetSilhouetVals([pi;pj],  cur_silhouette);

ind = pts_ind(ind);

voxel_inds{i} = ind;
img_vals{i} = img_val;

if(display_projected_voxels)
    figure(fid), 
    imagesc(cur_silhouette);title(i);hold on
    plot(object_points_cam(1,:), object_points_cam(2,:), '.g');hold off

end

end
```

相关文章
|
2天前
|
算法 数据挖掘 vr&ar
基于ESTAR指数平滑转换自回归模型的CPI数据统计分析matlab仿真
该程序基于ESTAR指数平滑转换自回归模型,对CPI数据进行统计分析与MATLAB仿真,主要利用M-ESTAR模型计算WNL值、P值、Q值及12阶ARCH值。ESTAR模型结合指数平滑与状态转换自回归,适用于处理经济数据中的非线性趋势变化。在MATLAB 2022a版本中运行并通过ADF检验验证模型的平稳性,适用于复杂的高阶自回归模型。
|
2天前
|
机器学习/深度学习 算法
基于心电信号时空特征的QRS波检测算法matlab仿真
本课题旨在通过提取ECG信号的时空特征并应用QRS波检测算法识别心电信号中的峰值。使用MATLAB 2022a版本实现系统仿真,涵盖信号预处理、特征提取、特征选择、阈值设定及QRS波检测等关键步骤,以提高心脏疾病诊断准确性。预处理阶段采用滤波技术去除噪声,检测算法则结合了一阶导数和二阶导数计算确定QRS波峰值。
|
2天前
|
机器学习/深度学习 算法 数据安全/隐私保护
基于PSO粒子群优化的GroupCNN分组卷积网络时间序列预测算法matlab仿真
本项目展示了一种结合粒子群优化(PSO)与分组卷积神经网络(GroupCNN)的时间序列预测算法。该算法通过PSO寻找最优网络结构和超参数,提高预测准确性与效率。软件基于MATLAB 2022a,提供完整代码及详细中文注释,并附带操作步骤视频。分组卷积有效降低了计算成本,而PSO则智能调整网络参数。此方法特别适用于金融市场预测和天气预报等场景。
|
6天前
|
算法 5G 数据安全/隐私保护
SCM信道模型和SCME信道模型的matlab特性仿真,对比空间相关性,时间相关性,频率相关性
该简介展示了使用MATLAB 2022a进行无线通信信道仿真的结果,仿真表明信道的时间、频率和空间相关性随间隔增加而减弱,并且宏小区与微小区间的相关性相似。文中介绍了SCM和SCME模型,分别用于WCDMA和LTE/5G系统仿真,重点在于其空间、时间和频率相关性的建模。SCME模型在SCM的基础上进行了扩展,提供了更精细的参数化,增强了模型的真实性和复杂度。最后附上了MATLAB核心程序,用于计算不同天线间距下的空间互相关性。
10 0
|
6天前
|
算法
基于极大似然算法的系统参数辨识matlab仿真
本程序基于极大似然算法实现系统参数辨识,对参数a1、b1、a2、b2进行估计,并计算估计误差及收敛曲线,对比不同信噪比下的误差表现。在MATLAB2022a版本中运行,展示了参数估计值及其误差曲线。极大似然估计方法通过最大化观测数据的似然函数来估计未知参数,适用于多种系统模型。
|
1月前
|
安全
【2023高教社杯】D题 圈养湖羊的空间利用率 问题分析、数学模型及MATLAB代码
本文介绍了2023年高教社杯数学建模竞赛D题的圈养湖羊空间利用率问题,包括问题分析、数学模型建立和MATLAB代码实现,旨在优化养殖场的生产计划和空间利用效率。
106 6
【2023高教社杯】D题 圈养湖羊的空间利用率 问题分析、数学模型及MATLAB代码
|
1月前
|
存储 算法 搜索推荐
【2022年华为杯数学建模】B题 方形件组批优化问题 方案及MATLAB代码实现
本文提供了2022年华为杯数学建模竞赛B题的详细方案和MATLAB代码实现,包括方形件组批优化问题和排样优化问题,以及相关数学模型的建立和求解方法。
82 3
【2022年华为杯数学建模】B题 方形件组批优化问题 方案及MATLAB代码实现
|
1月前
|
数据采集 存储 移动开发
【2023五一杯数学建模】 B题 快递需求分析问题 建模方案及MATLAB实现代码
本文介绍了2023年五一杯数学建模竞赛B题的解题方法,详细阐述了如何通过数学建模和MATLAB编程来分析快递需求、预测运输数量、优化运输成本,并估计固定和非固定需求,提供了完整的建模方案和代码实现。
62 0
【2023五一杯数学建模】 B题 快递需求分析问题 建模方案及MATLAB实现代码
|
4月前
|
数据安全/隐私保护
耐震时程曲线,matlab代码,自定义反应谱与地震波,优化源代码,地震波耐震时程曲线
地震波格式转换、时程转换、峰值调整、规范反应谱、计算反应谱、计算持时、生成人工波、时频域转换、数据滤波、基线校正、Arias截波、傅里叶变换、耐震时程曲线、脉冲波合成与提取、三联反应谱、地震动参数、延性反应谱、地震波缩尺、功率谱密度
基于混合整数规划的微网储能电池容量规划(matlab代码)
基于混合整数规划的微网储能电池容量规划(matlab代码)