OpenCV中文网站

 找回密码
 立即注册
搜索
热搜: 安装 配置
查看: 25079|回复: 36

自己动手做个BumbleBee XB2双目相机

[复制链接]
发表于 2015-2-17 13:18:54 | 显示全部楼层 |阅读模式
本帖最后由 窦仁银 于 2015-2-17 13:18 编辑

项目名称:Robot Eyes

1. 背景     
     本人从2012年开始从事计算机视觉相关项目,一直做得是双目视觉相关的内容,包含视觉里程计、立体匹配和三维重建,一直使用的BumbleBee XB2相机(俗称大黄蜂)。使用大黄蜂有一个最大的好处是无需考虑图像的畸变,立体校准等问题,因为它输出的已经是畸变校准、立体校准后且双目同步后的图像,只需专注于后端视觉算法即可,使得精力能够聚焦。
     然而,使用大黄蜂相机有一个最大的问题有两点:
     其一、价格昂贵,大黄蜂的价格在万元以上,这个价格对于很多研究者来说还是蛮贵的,当然科研院所除外,一般在科研院所工作和学习的人有机会使用这么昂贵的相机,而对于普通研究者,甚至是兴趣爱好者想转入计算机视觉领域看到这个价格也会望而止步;
     其二、接口不够通用,大黄蜂提供的接口为1394火线接口,一般连接PC需使用1394转PCI板卡,这种对于目前看来很蹩脚的设计当然和当初他出现时,没有更好的接口能适应那么高的数据带宽有关。目前USB2.0对于双相机VGA灰度 30帧的速率应该是很轻松的,况且还有USB3.0。
   当然也有人说,网上针对不同算法会有对应的数据集,不是也可以。这个当然,网上公开的一些数据集对于某一项研究起步是很重要的。但是一旦算法开发至一定阶段,需要在各种测试环境下测试或是做实时系统时,这就不能满足条件。
     近几个月又接触到FPGA相关技术开发,觉得FPGA应用在图像处理上是具有重大意义的,首先,一些复杂的算法动辄需要几GHZ的CPU多个处理核,使得其很难应用在嵌入式领域,功耗也很大,而FPGA本身是通过硬件电路进行运算的,具有完全并发性,再加以时序控制,流水线运算设计能大大加速图像的运算,往往能使得本身很难商业化的复杂算法来进行商业化。其次,目前FPGA的成本及开发难度均在降低,而电路规模却在加大,使得其在图像领域的应用更加广泛。
      因此,作为FPGA与计算机视觉相结合的第一步,先将图像传感端跟做好,主要功能包含:实时同步采集双目图像数据,实时输出畸变校正和立体矫正后的图像,并且能输出深度图像(类似微软的Kinect),USB接口、而且成本控制在1000以内,目前估计应该在500元以内。
     不知道论坛里的各位坛友们对此有无需求,欢迎提出宝贵意见哈~
      最后解释一下为什么项目名称为Robot Eyes?目前机器人技术遇到爆发期,其中机器人视觉是一个很重要的部分,作为机器人视觉的第一步,期待后续能基于Robot Eyes的双目硬件,继续完善机器人视觉的功能。
2. 功能规划
    Image.png
    具体如上图所示,使用两个CMOS图像传感芯片加FPGA再加一片USB控制芯片组成核心的硬件系统。

预期设计指标:
基线长度:取在人眼瞳距范围内: 65mm
帧率: VGA 30fps
焦距与视角:未定
三种模式输出
1. 深度图
2. 双目立体图片,灰度图
3. 单一相机图像加深度图
3. 时间规划

原型开发            目前 -- 2015.05.30
PCB制板与改进   2015.06.01 -- 2015.07.30


开发进度会持续更新,欢迎大家关注和支持~  



回复

使用道具 举报

发表于 2015-3-6 17:19:09 | 显示全部楼层
mark,关注一下。
回复 支持 反对

使用道具 举报

发表于 2015-3-6 20:07:06 | 显示全部楼层
强烈关注,最好能做成USB2.0或者3.0接口的,让大家都可以买来用用!我也是做双目立体视觉的,一般专注在工业和交通方面。有兴趣可以交流交流
回复 支持 反对

使用道具 举报

发表于 2015-3-7 11:24:36 | 显示全部楼层
支持,不知团队建设得如何?可以造成开源的模式,更多人参与,大家出一份力!
回复 支持 反对

使用道具 举报

 楼主| 发表于 2015-3-10 09:45:10 | 显示全部楼层
danielwang1983 发表于 2015-3-6 20:07
强烈关注,最好能做成USB2.0或者3.0接口的,让大家都可以买来用用!我也是做双目立体视觉的,一般专注在工 ...

嗯,目前打算是用USB3.0接口,做成UVC驱动方式,这样上位机方面,就不用编写对应的驱动了。
回复 支持 反对

使用道具 举报

 楼主| 发表于 2015-3-10 09:46:49 | 显示全部楼层
托卡玛克 发表于 2015-3-7 11:24
支持,不知团队建设得如何?可以造成开源的模式,更多人参与,大家出一份力! ...

目前团队就2人,开源可以等前期一些工作之后完成之后~
回复 支持 反对

使用道具 举报

 楼主| 发表于 2015-3-10 09:52:16 | 显示全部楼层
danielwang1983 发表于 2015-3-6 20:07
强烈关注,最好能做成USB2.0或者3.0接口的,让大家都可以买来用用!我也是做双目立体视觉的,一般专注在工 ...

我的QQ号是1032305009,有机会咱们可以交流一下~
回复 支持 反对

使用道具 举报

发表于 2015-3-10 14:43:24 | 显示全部楼层
强烈关注,最好能做成USB2.0或者3.0接口的,让大家都可以买来用用!
回复 支持 反对

使用道具 举报

发表于 2015-4-7 21:03:14 | 显示全部楼层
楼主, BumbleBee相机能连接到笔记本上用吗
回复 支持 反对

使用道具 举报

发表于 2015-4-17 10:11:02 | 显示全部楼层
期待中
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

手机版|OpenCV中文网站

GMT+8, 2024-4-29 06:52 , Processed in 0.010831 second(s), 19 queries .

Powered by Discuz! X3.4

Copyright © 2001-2021, Tencent Cloud.

快速回复 返回顶部 返回列表