东芝开发出了汽车驾驶辅助用图像识别IC的新产品“TMPV760”系列,并在“Electronica 2014”的新闻发布会上介绍了新产品的功能等。这是该公司的第四代驾驶辅助用图像识别IC。
可在夜间检测到行人
新产品与东芝的原产品相比有两大特点,一个是可在夜间检测到行人,另一个是仅靠一个车载摄像头就能获得大致的距离信息、从而进行3D识别。欧洲汽车评估机构“Euro NCAP”计划从2018年开始对汽车在白天和夜间的行人检测功能进行评估,新产品就是为了应对这一测试而开发的。东芝的目标是从2016年12月开始量产TMPV760系列。
新产品扩展了名为“CoHOG”的图像识别技术,可在夜间检测到行人。据介绍,TMPV760系列可根据行人的影像提取出行人身体的色调层次以及姿态等五种数据,利用这些数据,即使在夜间,也可以识别出行人和周围环境的边界。据东芝介绍,新产品在夜间的行人识别能力提高到了该公司原有产品的两倍左右。
通过单眼摄像头复原3D模型
为了能够通过单眼摄像头实现3D识别,TMPV760系列采用了名为“SfM(Structure from Motion)”的技术。采用的方法是,移动摄像头的位置,获得视点不同的多个图像,然后对这些图像加以比较,从而复原拍摄对象的三维(3D)模型。
对于车载摄像头,只要车辆移动就能获得视点不同的多个图像,因此可以使用SfM制作车辆周边的简易3D模型。据介绍,获得的3D模型如何应用不是由东芝来决定的,而是取决于汽车厂商。比如,可以组合使用由多个车载摄像头获得的图像生成的360度图像,从而提高驾驶辅助的精度等。
上述一系列的图像识别处理利用VGA和全高清(1920×1080像素)车载摄像头就能实现,无需专门选择某种摄像头。图像识别IC与摄像头之间的接口支持MIPI的“CSI-2”。
图像识别IC配备图像识别处理用加速器。其他各种控制则通过配备的CPU来处理。
还可以识别信号灯和标志
据东芝介绍,TMPV760不仅能用来识别行人、生成3D模型,还可以用来识别前方车辆、信号灯、交通标志以及车道线等。
相关负责人介绍说,在开发这款产品时,“我们为了如何有效利用外部存储器的带宽煞费苦心”。“原来的图像识别IC是根据外部存储器(DRAM)的带宽来决定可以使用的功能并配备的。也就是说,配备何种功能大多是取决于存储器。而此次决定为芯片配备估计客户(汽车厂商和电子元件厂商)想要使用的功能,因此希望能有效利用有限的存储器带宽”。
另外,TMPV760采用27mm见方的BGA封装,端子数为800。