5 VPAC 视觉加速器和 ISP

VPAC-3L 是 TI 的第 7 代图像传感器处理器 (ISP)。此硬件加速器执行图像处理功能，以支持原始输出图像传感器。

视觉成像子系统 (VISS) 是传统 ISP，支持以下功能：去噪、去马赛克、缺陷像素校正、增益和白平衡（手动和自动）、色差校正 (CAC) 和宽动态范围 (HDR) 编码。去马赛克功能支持 RGB-Ir，无需辅助摄像头和帧对齐即可实现高分辨率红外帧捕获。

VPAC-3L 包含一个镜头失真校正子系统，用于针对通过高视场镜头捕获的图像消除扭曲。具有鱼眼等广角镜头的摄像头需要进行校正，将图像恢复为矩形形式，并减少靠近摄像帧边缘的非线性拉伸效果。

图 5-1 镜头失真校正：A) 鱼眼镜头拍摄的未加工帧，B) 正面透视输出图像，C) 中间网格图像 - 使用等积鱼眼投影模型扭曲和内插，将图像投影为全分辨率矩形格式

VPAC-3L 还包括用于缩小图像比例的多标量 (MSC) 引擎。MSC 支持两个输入和 10 个输出，可以独立复制和缩放输入。其中一种应用场景是缩小图像比例，用于机器学习，同时保留全尺寸版本，使机器学习的输出可以覆盖在全分辨率帧上。MSC 支持在每个方向上最多减少 4 倍，并根据需要自动内插，包括拉伸/缩小以适应宽高比的变化。图 4-2 中利用了该功能，"tiovxmultiscalar" gstreamer 插件生成两条输出路径，并在 "tiovxdldrawbox" 插件上再次合并，用于将物体检测边界框绘制到原始图像上。

TI 支持大量摄像头传感器和模块，并与第三方合作，通过驱动程序支持和 ISP 调优帮助开发人员添加新的摄像头传感器。ISP 调优工具还可帮助经验更丰富的 ISP 调整人员完成此工作。