【代发需求】SS928硬件加速图像处理

1. 核心功能模块
1.1 硬件加速格式转换器
• 支持平台: TDE、OT_Video、SVP三个加速器
• 转换方向:
• YUV420SP ↔ SVP支持格式
• YUV420SP ↔ TDE的RGB888格式
• 双向转换支持
1.2 JPEG 硬件编解码器
• VDEC模块: JPEG图片解码为ot_video_frame
• VENC模块: ot_video_frame编码为JPEG文件
• 文件操作: 支持JPEG文件保存
2. 图像处理工作流
2.1 图像载入阶段
输入图片 → 格式判断 → 解码处理
├── JPEG格式 → 硬件VDEC解码 → ot_video_frame
└── 其他格式 → OpenCV解码 → 构建硬件数据结构
2.2 图像处理流水线

1. 格式转换 → SVP格式
2. IVE 加速处理 → ss_mpi_ive_filter(高斯滤波)
   1. 色彩空间转换 → ss_mpi_ive_csc → RGB格式
3. RGB格式→ TDE加速器处理 导入作为背景图
4. 遮罩处理 → (重复执行1 和 3) 导入Mask图片 → ss_tde_bitmap_mask_rop
   1. 前景提取 → 遮罩mask + 背景图
5. 输出转换 → 色彩空间转换 → YUV420SP
   1. 编码保存 → VENC编码 → JPEG文件
6. 可选输出 → OpenCV保存 → PNG文件
   3. 内存管理要求
   3.1 DMA拷贝策略
   • 输入保护: 所有输入源标记为const
   • 临时拷贝: 每个图像操作前进行DMA拷贝到临时缓冲区
   • 生命周期: 处理完成后销毁临时数据结构
   • 数据安全: 防止处理过程中源数据被销毁或修改
   3.2 分块处理机制
   • 硬件限制检测: 当图像尺寸超出IVE/TDE硬件限制时
   • 分块策略: 通过DMA进行分块处理
   • 结果整合: 处理完成后整合所有分块结果
   4. 性能目标要求
   4.1 核心性能指标
   • CPU占用率: 连续运行流水线100次，CPU占用率 ≤ 5%
   • 硬件加速: 在OpenCV不介入的情况下，忽略文件系统I/O
   • 内存拷贝: 全流程无CPU进行的memcpy操作
   • 内存安全: 无内存溢出，无MMZ内存溢出
   4.2 性能优化策略
   • 纯硬件处理: 所有图像处理操作通过硬件加速器完成
   • DMA优化: 利用硬件DMA进行数据传输，避免CPU拷贝
   • 内存池管理: 预分配MMZ内存池，减少动态分配开销
   • 流水线优化: 最小化硬件加速器间的数据传输
   5. 技术实现要点
   5.1 硬件加速器集成
   • SVP: 支持YUV420SP格式处理
   • IVE: 高斯滤波和色彩空间转换
   • TDE: RGB888格式处理和遮罩操作
   • VDEC/VENC: JPEG编解码
   5.2 数据格式支持
   • 输入格式: JPEG、PNG等常见图像格式
   • 中间格式: YUV420SP、RGB888、SVP格式
   • 输出格式: JPEG、PNG
   5.3 错误处理
   • 硬件加速器状态检查
   • 内存分配失败处理
   • 格式转换错误处理
   • 文件I/O异常处理
   6. 开发规范要求
   6.1 代码规范
   • 使用Doxygen格式的函数注释
   • 遵循RAII内存管理原则
   • 统一的错误管理机制
   6.2 性能优化
   • 最小化DMA拷贝次数
   • 优化分块处理策略
   • 硬件加速器并行利用
   • 严格避免CPU内存拷贝操作
   7. 性能测试验证
   7.1 测试场景
   • 连续运行完整流水线100次
   • 监控CPU占用率
   • 检测内存使用情况
   • 验证无CPU memcpy操作
   7.2 验收标准
   • CPU占用率 ≤ 5%
   • 无内存泄漏
   • 无MMZ内存溢出
   • 全流程硬件加速完成