版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
增强现实算法基础
--空间变换与相机模型单位信息任课教师空间变换与相机模型主要内容空间变换增强现实中的空间空间变换与坐标变换相机模型相机的几何模型单视图定标基础空间变换:增强现实中的空间增强现实的目标是要将虚拟与现实融为一体基本要求:虚拟物体与现实世界的坐标系保持恒定的空间变换关系AR通常牵连了若干个坐标系,并需要计算他们之间的变换关系空间坐标系的建立使得空间坐标和变换可计算虚拟物体与真实物体绑定空间变换:增强现实中的空间空间坐标系笛卡尔坐标系的建立3D点的空间坐标右手系三维点坐标的表示空间变换:增强现实中的空间空间坐标系齐次坐标采用n+1维向量表示n维向量齐次坐标到普通坐标的变换函数齐次坐标普通坐标齐次坐标的性质齐次坐标乘以一个非零常数,所表示的三维点不变当时,齐次坐标表示了一个沿着方向的无穷远点齐次坐标使刚体变换可以采用单个矩阵变换来表示空间变换:增强现实中的空间空间关系的表示3D空间平面线性函数表示矩阵表示2D空间线2点决定一条直线2条直线交于一点矩阵表示空间变换:增强现实中的空间增强现实中的坐标系现实场景的坐标系场景坐标系物体坐标系虚拟物体的坐标系虚拟物体的局部坐标系虚拟物体的全局坐标系虚拟场景坐标系观察者坐标系相机坐标系头盔的显示器坐标系图像坐标系空间变换:增强现实中的空间[R|t]相关空间及其坐标系现实世界–场景坐标系如何建立坐标系?虚拟世界–虚拟坐标系相机成像平面虚拟坐标系中的虚拟物体相机坐标系中的虚拟物体观察者场景坐标系中的虚拟物体3D注册跟踪注册空间变换:增强现实中的空间相关空间及其坐标系现实世界–场景坐标系如何建立坐标系?虚拟世界–虚拟坐标系相机成像平面虚拟坐标系中的虚拟物体相机坐标系中的虚拟物体观察者场景坐标系中的虚拟物体3D注册跟踪注册现实场景坐标系虚拟场景坐标系虚拟物体局部坐标系空间变换:增强现实中的空间相关空间及其坐标系观察者坐标系相机坐标系图像坐标系空间变换:空间变换与坐标变换空间变换物体由于运动,其位置和朝向有所改变,导致其坐标发生变化,这种变换称为坐标变换坐标变换物体本身保持静止,但是坐标系发生了变化,导致物体的空间坐标发生变化,这种变换称为坐标系变换点P在坐标系A的坐标到坐标系B的变换空间变换:空间变换与坐标变换刚体的坐标变换刚体变换仅有旋转和平移物体的形状和大小不变虚拟坐标系中的虚拟物体场景坐标系中的虚拟物体3D注册其中:空间变换:空间变换与坐标变换刚体的坐标变换刚体变换仅有旋转和平移用1个矩阵表示刚体变换旋转矩阵的性质特征根的绝对值为1逆矩阵为自身的转置列向量为单位向量列向量之间相互正交行向量为单位向量行向量之间相互正交3个自由度其中:空间变换:空间变换与坐标变换刚体变换的表示旋转矩阵R:3自由度欧拉角万向节死锁四元数:常用旋转轴和角度表示平移向量
t
:3自由度普通三维向量欧氏变换矩阵齐次坐标齐次坐标下的欧氏变换矩阵坐标标架变化与物体运动欧拉角物体运动导致的坐标变换空间变换:空间变换与坐标变换刚体的坐标变换刚体变换的逆变换可以验证:即:空间变换:空间变换与坐标变换空间变换及对应矩阵变换矩阵的系数决定了物体形状的变化空间变换:空间变换与坐标变换空间变换及对应矩阵变换矩阵的系数决定了物体形状的变化增强现实算法基础
--空间变换与相机模型单位信息任课教师相机模型:相机的几何模型虚拟物体的景象需要相机模型生成计算机图形学绘制的相机模型相机是观察者看世界的常用方式相机是常用的传感器计算机视觉是从相机拍摄的影像中重构现实世界相机模型的意义建立现实中的3D点与2D图像像素之间的对应关系使得相机的感知和绘制都是可计算的相机模型:相机的几何模型针孔相机模型相机的成像原理小孔成像现实中的3D在像平面上成像相机模型:相机的几何模型针孔相机模型相机坐标系相机光心为原点,视向为z轴,图像水平方向为x轴,竖直方向为y轴相机模型是要建立空间三维点X与像点u的关系相机模型:相机的几何模型针孔相机模型空间三维点X与成像平面点u的关系三维空间点
,齐次坐标成像平面成像平面上的点u,齐次坐标3D点坐标齐次坐标相机模型:相机的几何模型Zuu
O针孔相机模型空间三维点X与成像平面点u的关系在剖面上看X与u的关系XX相机模型:相机的几何模型Zuu
O针孔相机模型空间三维点X与成像平面点u的关系在剖面上看X与u的关系XX相机模型:相机的几何模型Zuu
O针孔相机模型空间三维点X与成像平面点u的关系在剖面上看X与u的关系XX相机模型:相机的几何模型Zuu
O针孔相机模型空间三维点X与成像平面点u的关系在剖面上看X与u的关系XX投影矩阵相机模型:相机的几何模型Zuu
O针孔相机模型空间三维点X与成像平面点u的关系在剖面上看X与u的关系XX投影矩阵符号表示相差一个尺度因子
相机模型:相机的几何模型针孔相机模型成像平面点u与图像点x的关系其中的单位是(像素/长度)其中称为内部参数矩阵令则在和的第3分量均为1时等号成立相机模型:相机的几何模型针孔相机模型成像平面点u与图像点x的关系相机的内部参数矩阵称为内部参数矩阵intrinsicmatrix为上三角矩阵
为水平和竖直方向的缩放
为光心在图像平面的投影点长宽比aspectratio为相机模型:相机的几何模型场景点在图像中的投影点为相机成像模型场景点到相机坐标系的变换相机模型:相机的几何模型相机成像模型场景三维点与图像点x的关系则称为透式投影矩阵记称为投影矩阵空间三维点与图像点的映射关系为3x4的矩阵具有11个自由度将直线映射到直线相机模型:相机的几何模型消失点平行直线在图像上的汇聚点Vanishingpoint相机模型:相机的几何模型消失点平行直线在图像上的汇聚点记则过点A沿V方向的平行直线族上的点:相机模型:相机的几何模型消失点平行直线在图像上的汇聚点令s趋于无穷:则该极限点与点A无关,称为消失点相机模型:相机的几何模型相机畸变模型线性畸变的完整模型中心点:principlepoint长宽比:aspectratio倾斜角:skew相机模型:相机的几何模型桶形失真枕形失真相机畸变模型线性畸变非线性畸变桶形失真枕形失真畸变的矫正Tsai-1987的基于棋盘格的方法张正友-2000的基于平面特征点的方法相机模型:单视图定标基础投影矩阵的标定相机模型由投影矩阵决定问题陈述已知一组3D空间点:及其在图像上的投影坐标:由相机模型:求相机的投影矩阵:再求解相机内外部参数:相机模型:单视图定标基础投影矩阵的标定图像点的坐标特征提取方法,例如Harris三维坐标的获取定标板:棋盘格定标板图像点与三维点的对应自动交互Matlab/openCV棋盘格定标板相机模型:单视图定标基础投影矩阵的标定由像点坐标:有其齐次坐标:则由:有:记:相机模型:单视图定标基础投影矩阵的标定方程的求解A是12x2m的矩阵,是瘦长的A通常是秩12的矩阵,意味着方程只有0解要获得非零解,只能采用最小二乘优化求解最优化问题为:解为的最小特征根所对应的特征向量
最小化并满足:相机模型:单视图定标基础投影矩阵的标定方程的求解将解出的向量重新排列,就获得解出的投影矩阵最小化并满足:线性解不够精确时,进一步采用非线性方法求解将线性解作为初值
相机模型:单视图定标基础由投影矩阵估计内外部参数将投影矩阵分成两部分利用旋转矩阵的正交性求解内部参数矩阵的系数
的右下角元素应该归1相机模型:单视图定标基础由投影矩阵估计内外部参数非线性方法定标线性方法得到的结果一般不够精确非线性方法采用重投影点的误差最小作为约束,具有几何意义
相机模型:单视图定标基础单视图定标要点总结用相机拍摄棋盘格定标板图像用图像处理方法获得定标板图像的2D角点位置及对应的3D点坐标估计投影矩阵再由投影矩阵估计内外部参数相机模型:单视图定标基础图像中定标板任意点的3D坐标假设相机已经标定,即已知相机参数:P,K,R,t相机光心的位置为:图像上的2D点x决定了一条方向为的射线过相机光心的这条射线与定标板平面Z=0求交交点即为所求相机模型:单视图定标基础投影仪与相机的校准投影仪与相机是增强现实中的常用组合目的是确定投影仪与相机的相对位姿关系分析投影仪模型与相机模型有相同表示投影仪射出光线相机捕获光线投影仪不是传感器相机是良好的传感器策略相机拍摄实物棋盘格投影仪投射相同的棋盘格图案相机投影仪T相机模型:单视图定标基础投影仪与相机的校准场景中布置棋盘格定标板相机的校准
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 五年级主题班会《识别隐形杀手 筑牢安全防线》预防一氧化碳中毒教学设计
- 初中信息技术八年级《游戏制作》教学设计
- 初中七年级地理教学设计:西亚-石油宝地与水资源困境的区域认知构建
- 人教版八年级物理下册 12.3 滑轮 教学设计
- 小学三年级书法教学设计:横画笔法核心要素与“乐”字书写实践
- 初中语文说明文阅读专题复习教学设计:中考真题破解与考点深度剖析
- 高中二年级英语选择性必修二Unit 4 Welcome to the unit板块教学设计
- 高三英语选择性必修一Unit4 Body Language大一轮复习课教案
- 四年级美术教学设计:剪纸故事情境创编与群像构图
- 小学二年级英语Unit 6 In the Sea Talking Time教学设计
- 混凝土工程冬季施工专项方案
- (2026版)《建筑公司经营部年终工作总结》
- 2026地球小博士知识竞赛试题附答案
- 2026银行信用卡业务盈利模式转变规划分析研究报告
- 2026新教材语文 2《啊我们踯躅于黑暗的丛林里!》教学课件
- 钉子板上的多边形教学设计
- 2026年认证基础CCAA考试练习题及答案
- 气体灭火系统培训课件
- (2026年)ICU人工气道气囊微误吸防控证据总结课件
- 2026年株洲市天元区社区工作者招聘笔试参考题库及答案解析
- 《机械制图》电子教材
评论
0/150
提交评论