OPPO、RESS和高通近日宣布,双方将合作推动创新的混合视觉传感(HVS)技术在智能手机领域的应用。 HVS传感器用于更高效地提取运动信息和图像数据,有助于进一步提高相机性能,实现图像的AI运动功能。
三方将共同开发一个完整的解决方案,包括从混合视觉传感器捕获原始视觉信息,将其传输到骁龙移动平台,并使用专有算法。 此次合作将有助于实现创新的智能手机图像功能,如照片去模糊、超分辨率和超慢动作重建,这些功能需要基于图像和运动信息相结合的算法,具有开创性的意义。
高通公司产品管理副总裁Judd Heape表示:“与传统的图像传感技术相比,EVS技术在捕捉运动信息方面具有更大的优势。 HVS解决方案结合了图像和事件传感技术的优点。 在平台硬件和算法的支持下,智能手机的成像能力得到了显著提升。 我们很高兴与OPPO和RESS合作,为这项技术的商业化做出贡献。 我们也相信这项技术将更广泛地应用于各个领域。
OPPO Imaging产品总监张轩表示:“多年来,我们对前沿传感器技术进行了广泛的研究,特别是在HVS(Fusion Visual Sensing)技术领域。 我们与RESS和高通有深度合作,并参与了芯片和算法的多次迭代开发。 我们对这项技术的潜力充满信心,并将在未来继续投资,并期待与我们的合作伙伴一起将这项技术应用于OPPO的超光影图像引擎。 ”
运动信息在摄影和机器视觉中至关重要。 传统的图像传感器将一段时间(即时间)内的运动信息重叠到单个图像帧中,但这很容易导致运动模糊和有效运动数据的丢失。
利用视觉传感器有效获取高精度运动信息是当今各个领域的首要需求之一。 基于传统的图像传感器,业界通常通过提高帧率来获取高精度的运动信息,但同时又要付出巨大的冗余数据的代价,伴随着资源消耗、系统成本增加、系统处理效率降低。 此外,高帧率意味着较短的**时间,这极大地损害了相机对环境光的适应能力。
因此,对于许多应用来说,通过提高帧速率来获得更有效、更高精度的运动信息是具有成本效益且不切实际的。 需要一种更具成本效益的技术路径来实现运动信息的高效捕获。
基于事件的视觉传感器(EVS)是一种成像技术,无需快门即可连续记录不断变化的运动信息机制。 通过其独特的像素内处理机制,在记录运动信息时,能够在高帧率、高动态范围和低数据冗余之间实现平衡。
由于EVS对静态信息不敏感,不擅长捕捉许多机器视觉应用所需的关键静态图像信息,通常需要与传统的图像传感器(RGB)一起使用,但这两种技术的融合并不容易,并且面临着两类视觉信息(EVS和RGB)的时空配准挑战, 同时,成本和系统复杂度的增加,也在一定程度上抑制了EVS发挥其原有的技术优势。
ResChip 于 2019 年推出的融合视觉传感 (HVS) 技术将 EVS 和传统图像功能结合在同一传感器芯片上。 Krism 的 ALPIX 系列传感器可同时输出高质量的 RGB 图像和 EVS 数据流,为捕获具有运动信息的图像提供了一种经济高效且算法友好的解决方案。
RESIS创始人兼CEO邓健表示:“在目前的视觉传感器领域,人们不仅对2D RGB信息有更高的期望; 此外,传感器还迫切需要提供额外的数据,如距离、光谱和运动信息。 我们与 OPPO 和 Qualcomm 合作,推动 Alpix-Eiger 与移动应用程序的无缝集成。 作为增强型RGB图像传感器,其图像质量可与市场上领先的图像传感器相媲美,同时引入EVS来捕捉运动信息。 我们非常兴奋和自豪能够看到并参与这项技术从概念到产品的整个过程。 ”
真正改变世界的不是技术本身,而是技术衍生产品应用给社会带来的价值。 我们希望将融合视觉传感技术(HVS)带给每个用户。 这是我们的初衷,我们期待这次合作取得丰硕成果“,邓健补充说。