深度相机与传感器讨论总结

深度相机与传感器讨论总结本文整理了今天关于 ZED 2i、奥比中光 Gemini 系列、线扫、结构光、ToF、双目和激光雷达的讨论重点放在原理区别、各自目的和选型判断。1. ZED 2i 偏光版和普通版ZED 2i 普通版和偏光版的核心差异在于镜头前是否带偏振滤镜。普通版进光量更足画面更亮低光环境更友好适合室内机器人、SLAM、三维重建、目标检测等通用场景。偏光版通过偏振片压制反光和眩光适合玻璃、金属、水面、湿地面、车漆、户外强光等高反光场景。它能让纹理更清楚对双目匹配和深度稳定性可能有帮助。偏光版的代价是进光量下降暗光环境更吃亏同时对反光的改善和光源方向、相机角度、偏振片角度有关不是所有反光都能消掉。简单选择普通室内、低光、通用机器人视觉普通版 户外强光、玻璃/金属/水面反光多偏光版2. 奥比中光 Gemini 335 和 335LGemini 335 和 Gemini 335L 都是 Gemini 330 系列双目深度相机核心都是 Stereo 双目方案但定位不同。Gemini 335 是紧凑通用版体积小、重量轻近距离起测更近适合小机器人、桌面抓取、近距离避障和空间受限场景。Gemini 335L 是长基线工业版基线更长防护等级更高精度和中远距离表现更强更适合 AMR、巡检机器人、工业机械臂、户外或半户外部署。关键差异可以这样理解335小、轻、近距离友好 335L长基线、更高防护、更适合远距离和工业环境3. Gemini 2 和 Gemini 335Gemini 2 和 Gemini 335 都是 RGB-D 双目深度相机但 Gemini 335 更新定位更偏机器人实际部署。Gemini 2 更像通用型 3D 相机适合室内、半户外、开发测试、普通机器人视觉和近中距离识别。Gemini 335 更强调复杂环境适应能力测距范围更远精度更好工作温度范围和防尘能力也更适合机器人应用。简单选择室内开发、普通RGB-D应用Gemini 2 机器人部署、户外/半户外、更远距离Gemini 3354. Gemini 2 和 Gemini 335 的深度技术区别Gemini 2 主要是主动双目 Active Stereo IR。它通过红外投射器给场景打出红外纹理再让左右红外相机做匹配根据视差计算深度。红外投射器打纹理 左右红外相机看同一片纹理 通过左右视差算距离这种方式在室内、低纹理物体、白墙、纸箱、人体等场景较稳定但在强阳光下红外纹理容易被环境光淹没。Gemini 335 更强调主动双目和被动双目的结合。它既可以用红外投射器补纹理也可以利用场景本身的自然纹理做双目匹配。有自然纹理时靠左右相机自然纹理匹配 纹理不足时红外投射器补纹理辅助匹配因此 Gemini 335 更适合半户外、户外、复杂光照和机器人实际部署。一句话Gemini 2 更像靠红外纹理辅助的室内双目相机 Gemini 335 更像主动补纹理 自然纹理匹配结合的机器人双目相机。5. 快门类型滚动快门和全局快门滚动快门 Rolling Shutter 是逐行曝光。第1行先曝光 第2行稍后曝光 第3行再稍后曝光 ...优点是成本低、分辨率和画质通常较好低光表现可能更好。缺点是拍高速运动或相机快速移动时容易出现果冻效应、倾斜、变形。全局快门 Global Shutter 是整张图同时曝光。所有像素同一时刻开始曝光 所有像素同一时刻结束曝光优点是高速运动不容易变形适合机器人、工业检测、运动捕捉、SLAM、双目深度。缺点是成本更高同规格下低光、动态范围或画质可能不如滚动快门。简单判断普通拍摄、静态场景滚动快门 高速运动、机器人、工业视觉全局快门6. 激光雷达的常见分类激光雷达可以按扫描维度、结构和测距原理分类。按扫描维度单点激光雷达只测一个点的距离。2D 线扫激光雷达在一个平面内旋转或摆扫得到一圈或一条二维轮廓。3D 激光雷达获得三维点云例如多线机械式雷达、MEMS 雷达、固态面阵雷达。按结构机械旋转式MEMS 振镜式棱镜/转镜式Flash 面阵式OPA 光学相控阵式按测距原理ToF 飞行时间法三角测量法FMCW 相干测距需要注意“线扫”有两个常见语境机器人避障/导航里的线扫雷达 2D 单线扫描激光雷达多数是 ToF 工业检测里的线激光轮廓扫描 线激光传感器/激光轮廓仪多数是三角测量7. 一圈一圈扫和投一条激光线的区别一圈一圈扫的激光雷达主要目的是看周围环境有多远。它通过激光点旋转扫出水平平面上的一圈距离数据。结果一圈距离点 用途导航、避障、建图、定位扫地机器人、AGV 小车、服务机器人上常见。它关心的是障碍物在哪里、墙在哪里、通道多宽、机器人在地图中的位置。投一条激光线的线激光传感器主要目的是测物体表面的形状、高度和轮廓。它把一条激光线打到物体表面再用相机从侧面看这条线的变形通过三角测量得到高度。结果一条截面轮廓 用途尺寸检测、表面缺陷、平整度、高度差、焊缝检测简单类比一圈一圈扫机器人问“我周围哪里有墙” 投一条激光线工厂问“这个零件表面平不平”8. 线扫和结构光的区别线扫激光和结构光都属于主动打光测三维但一次获得的数据形态不同。线扫激光通常是投一条激光线 相机看这条线在物体表面怎么弯曲 算出这一条截面的高度/轮廓它一次主要得到一条截面轮廓。如果要得到完整 3D 形状通常需要物体或传感器移动一条一条扫过去。结构光通常是投影器投出散斑/条纹/编码图案 相机拍整个区域的图案变形 算出一片区域的深度它一次可以获得一片区域的深度图更像 3D 相机。对比项目线扫激光结构光投影内容一条激光线散斑、条纹、编码图案一次得到一条截面轮廓一片区域深度图是否需要运动常需要移动扫描成 3D通常单帧或少帧直接出深度强项高精度轮廓测量快速获得面状深度常见场景工业检测、尺寸测量3D 相机、机器人、消费电子一句话线扫激光像用一把尺子一条一条量轮廓 结构光像用投影仪给一片区域打花纹一次看出整片深度。9. 线扫相机能否同时输出 RGB 和 3D可以但要看具体系统。如果是 3D 线扫相机或线激光轮廓仪它主要输出高度图、轮廓数据或点云。有些型号还能输出灰度图、亮度图、强度图但不一定是真正的 RGB 彩色图。如果要同时得到 RGB 图像和 3D 图像通常有三种方式3D 线扫轮廓仪 彩色线扫相机组合。带彩色纹理通道的 3D 线扫设备。使用 3D 相机 RGB 相机组合例如结构光/双目/ToF 加 RGB。线扫系统不是普通相机那样一帧拍完整画面通常需要物体在传送带上匀速运动或相机移动。编码器同步。触发同步。RGB 和 3D 坐标标定对齐。一句话线扫系统可以同时获得 RGB 和 3D 但很多时候是 3D 线扫轮廓仪 彩色线扫相机同步组合实现。10. 双目也能出点云为什么还要激光雷达双目和激光雷达都能输出点云但可靠性、距离、精度、环境适应性和数据形态不同。双目点云靠左右图像匹配算视差两个摄像头看到同一个点的位置差 算深度 生成点云双目的优点是成本低、能和 RGB 图像天然对齐、信息丰富适合近距离识别、抓取、避障、室内机器人。双目的弱点是怕低纹理、强光、逆光、黑暗、远距离、高反、透明和黑色吸光物体。匹配失败时会出现深度空洞或噪声。激光雷达是主动测距发出激光 接收反射 直接测距离激光雷达的优点是距离更远、测距更直接、对纹理不敏感适合导航、建图、避障、无人车、AGV、户外机器人和长距离障碍物检测。但激光雷达通常成本更高点云较稀疏没有天然 RGB 信息玻璃、水面、黑色吸光材料也可能有问题。简单选择近距离、需要颜色和语义、成本敏感双目/结构光 远距离、导航建图、低纹理环境、可靠避障激光雷达一句话双目点云更像用眼睛理解世界 激光点云更像用尺子稳定量距离。11. ToF 相机和结构光相机ToF 相机和结构光相机都属于主动式 3D 相机但测距方式不同。ToF 是测光飞行的时间或相位差发出红外光 光打到物体反射回来 测返回时间/相位差 算距离它像给每个像素都配一个小测距仪能一次获得整幅深度图。ToF 的特点是速度快、结构简单、不依赖物体纹理适合动态场景和近中距离空间感知。但它容易受多径反射、强光、黑色/反光物体影响近距离精度和边缘细节通常不如结构光。结构光是看投影图案的变形投射散斑/条纹/编码图案 相机拍到图案变形 根据变形量算深度结构光近距离精度高边缘和细节通常较好适合人脸识别、近距离三维重建、抓取定位。但强光下投影图案容易被淹没距离越远精度和稳定性下降越明显。对比项目ToF 相机结构光相机原理测光返回时间/相位差看投影图案变形测距方式时间/相位测距三角测量一次输出整幅深度图整幅深度图近距离精度一般通常更高动态场景较好取决于编码方式边缘细节可能有飞点/边缘噪声通常更细一句话ToF 是量光来回用了多久 结构光是看投出去的花纹变形了多少。12. ToF 相机和激光雷达ToF 相机和激光雷达都可以用飞行时间法测距离但形态和输出不同。ToF 相机更像一台深度摄像头一次照亮一片区域 每个像素测距离 输出一张深度图它输出规则二维深度图近中距离体验好体积小、成本相对低适合人体检测、机器人近距离避障、手势识别、空间感知。激光雷达更像激光测距扫描仪发射激光束 逐点/逐线/多线扫描 输出点云它距离更远测距精度和稳定性通常更强对纹理不敏感更适合 SLAM、导航、自动驾驶和户外机器人。对比项目ToF 相机激光雷达本质面阵深度相机激光测距扫描设备照射方式一次照亮一片区域点/线/多线扫描输出深度图点云数据密度近距离较密通常较稀疏但距离远距离近中距离中远距离更强成本体积较低、较小较高、较大典型场景手势、人脸、近距避障SLAM、导航、自动驾驶一句话ToF 相机像能看深度的摄像头 激光雷达像高速激光测距仪。13. 总体选型口诀要颜色和语义RGB / 双目 / RGB-D 要近距离高精度结构光 / 线激光 要工业轮廓测量线激光轮廓仪 要移动机器人导航2D/3D 激光雷达 要低成本深度图双目或 ToF 要户外远距离可靠避障激光雷达优先 要反光场景视觉偏光版相机可考虑 要高速运动不变形全局快门优先14. 一个简化理解双目两只眼睛看视差适合理解画面和近距点云 结构光投花纹看变形适合近距离高精度深度 ToF测光来回时间适合快速获得一整张深度图 线激光投一条线看截面适合工业轮廓测量 激光雷达用激光扫空间适合稳定导航、建图和远距离避障