本节概述了 AM6xA 上的 ISP 和图像流水线软件架构，有助于理解后面介绍的调优过程。

AM6xA 器件上的 ISP 提供通用视觉基元功能，用于在像素级执行的图像数据处理。ISP 中有三个子模块：视觉成像子系统 (VISS)、镜头失真校正 (LDC) 和多标量 (MSC)。

• 视觉成像子系统 (VISS)：VISS 对原始数据进行图像处理，其中包括宽动态范围 (WDR) 合并、缺陷像素校正 (DPC)、镜头阴影校正 (LSC)、全局和局部亮度和对比度增强 (GLBCE)、去马赛克、颜色转换和边缘增强 (EE)。该块采用原始图像作为输入并生成 YUV 输出。
• 镜头失真校正 (LDC)：LDC 引擎是一款 YUV 域处理器，设计用于执行透视和几何转换。此引擎可用于创建多种效果，例如镜头失真校正、对极校正和通用透视变换。
• 多标量 (MSC)：MSC 可以根据给定输入以各种缩放比例（1 × 和 0.25 × 之间）生成最多 10 个缩放输出。10 个缩放操作均可配置为执行金字塔缩放或倍频程间的缩放生成。

在这三个子模块中，需要对 VISS 和 LDC 进行调优，而 VISS 包含多个需要单独调优的处理块。

图 5-1 展示了 AM6xA 的图像处理流水线软件架构，包括摄像头捕捉子系统和 ISP。摄像头捕捉驱动程序在 Linux 中 A53 或 A72 内核上运行，ISP 驱动程序在 RTOS 中 R5 内核上运行。尽管在不同的 CPU 内核上运行，摄像头捕捉和 ISP 可以通过与 GStreamer 或 TIOVX 的相同框架连接和集成。

图 5-1 AM6xA 图像处理流水线

在本报告中，提供了用于集成图像流水线组件的 GStreamer 示例。摄像头捕捉子系统可通过 GStreamer 插件 v4l2src 访问。可通过相应的 GStreamer 插件访问这三个 ISP 子模块：tiovxisp、tiovxldc 和 tiovxmsc。