【基于直接法的双目视觉里程计设计案例2600字】

基于直接法的双目视觉里程计设计案例 1 11.2直接法 21.3直接法原理 3 4光流跟踪方法是LK光流法，该方法基于一些假设：3)空间一致假设：同一场景中相邻点在图像上的投影也是相邻点[28],运动状态一致。□直接法通过提取图像的像素点并跟踪每个像素点的亮度(灰度)信息，在基量像素，则是半稀疏直接法(如图1.1所示)。稀疏直接法是使用提取出来的角灰度信息来估计相机的运动和位置，通过保持5-7个关键帧的滑动窗口，来构DSO是当今直接法的代表，核心思想是利用滑动窗□优化来持续保持整个小时，用边缘化的方式去除窗□,被边缘化后的信息将作为优先信息添加到后续优化中。由于边缘化的原因，当线性化时，系统需要使用“FirstEstimateJacobian”技术，由于DSO只维系当前窗□中的信息，使其不能有效复用地图基于光流法不需要描述子的计算和匹配，但光流本身的计算就需要一定的时间，且要求相机运动微小。直接法与光流法相似，也基于灰度一致性假设，依靠最小化灰度误差得到相机姿态变化。如图1.2,给定空间点X,图像I₁,I₂以及空间点X在I₁,I₂上的像先估计相机姿态得到x₂的位置，定义误差为x₂与x₁附近像素块的光度误差，通过最小化光度误差来迭代优化相机姿态，同时我们也在迭代寻找与x₁更相似的像素作为x₂。一般地，直接法中误差e的定义和整个问题的能量函数形式为：□量相机姿态的雅可比矩阵形式：□其中，由误差e的定义可知式3-3右侧前者：即为x₂图像的梯度。而式3-3右侧后者：x为归一化平面坐标。式3-5右侧前者可以由归一化坐标定义x₂=Kx₂求得，而误差关于地图点变量的导数形式，采用逆深度p来表示空间点的位置换关系得：□口R₂1,t₂₁为空间点由I摄像机坐标系改变到I₂摄像机坐标系的位置姿态变化。由式3-8可以求得x₂关于地图点逆深度的导数关系。代入式3-7即可求得误1.4直接法视觉里程计与惯性测量单元融合的位资估计直接法对于光照灵敏度要求比较高，导致算法的鲁棒性比较低错误!未找到引用源。O为使得视觉里程计定位的鲁棒性得到改善，现大多将惯性测量单元与视觉里程计环境干扰等问题予以补偿。根据是否将特征信息加入状态变量来划分，分为松耦合和紧耦合两类算法。对于松耦合，惯性测量单元和相机分别进行数据采集和处理，进行运动估计错误!未找到引用源。,然后将它们的位姿估计结果合并，如图1.3所示。紧耦合是将惯性测量单元和相机的状态紧密地结合到一起，一起来构建运动方程和观测方程，并对其进行状态估算，如图1.4所示。之所以选择用紧耦合算法很大程度上是由于松耦合中视觉内部BA并没有惯性测量单元的信息，从整体上来说并不能达到最优。而紧耦合可以同时建模所有运动和测量信息，更加轻松地实现了最优。所以当我们在实现紧耦合算法的过程中，需要很多数据来处理信息，匹配融合位置、方向和速度IUM数据积分角速度和线加速度位置和方向图1.3松耦合结构图角速度和线加速度IUM数据积分融合图1.4紧耦合结构图用直接法来检测和估计本体的位置和姿态，通过特征点的对齐和3D结构的优化方法来检测和优化帧，判断这些被优化后的帧是不是关键帧，并且可以优化局部的共视关键帧。为了能够更好地帮助我们实现前期测量单元的高精度姿态计算，基于前期预积分设计的思想，构造出一种速度、位置及零偏移的计算模型，通过更新位图像的滑动窗口优化算法，融合了先进的视觉数据，在图像边缘化过程中我们可以选择性地添加数据帧，以便于保证所需