RK3588开发板多路4K摄像头配置实战指南

当你在RK3588开发板上尝试连接多个4K摄像头时，可能会遇到各种限制和配置问题。本文将带你从硬件检查到软件配置，一步步实现多路4K摄像头的稳定录像功能。

1. 硬件准备与摄像头兼容性验证

在开始软件配置之前，确保硬件支持是成功的第一步。RK3588作为一款高性能处理器，理论上可以支持多路4K视频输入，但具体实现需要验证每个摄像头的实际能力。

使用v4l2-utils工具检查摄像头参数是最直接的方法：

# 列出所有视频设备节点
ls /dev/video*

# 检查第一个摄像头的支持格式和分辨率
v4l2-ctl --list-formats-ext --device /dev/video0

# 获取当前视频格式
v4l2-ctl -d /dev/video0 --get-fmt-video

执行这些命令后，你会看到类似如下的输出：

ioctl: VIDIOC_ENUM_FMT
	Index       : 0
	Type        : Video Capture
	Pixel Format: 'MJPG' (compressed)
	Name        : Motion-JPEG
		Size: Discrete 3840x2160
			Interval: Discrete 0.033s (30.000 fps)
		Size: Discrete 1920x1080
			Interval: Discrete 0.033s (30.000 fps)

关键检查点：

• 确认摄像头支持3840x2160分辨率
• 检查支持的编码格式（H264/MJPEG等）
• 验证帧率是否达到30fps

如果摄像头不支持4K输出，后续的软件配置将无法生效。我曾在项目中遇到过摄像头硬件支持4K但驱动限制在1080p的情况，这时需要联系供应商获取更新的驱动固件。

2. 深入解析media_profiles.xml文件结构

RK3588的媒体配置文件位于/device/rockchip/rk3588/rk3588_s/media_profiles_default.xml，这个XML文件定义了视频录制的基本参数和限制。理解它的结构对后续修改至关重要。

文件主要包含以下几个关键部分：

1. EncoderProfile：定义不同质量等级的编码配置

   • quality属性：如2160p、1080p等
   • fileFormat：输出文件格式（mp4/3gp）
   • duration：录制片段时长（秒）
   • cameraId：适用的摄像头ID

2. Video元素：视频编码参数

   <Video codec="h264"
         bitRate="6000000"
         width="3840"
         height="2160"
         frameRate="30" />
   

   • codec：编码格式（h264/mjpg等）
   • bitRate：比特率（bps）
   • width/height：分辨率
   • frameRate：帧率

3. VideoEncoderCap：编码器能力限制

   <VideoEncoderCap name="h264" enabled="true"
                   minBitRate="64000" maxBitRate="6000000"
                   minFrameWidth="176" maxFrameWidth="3840"
                   minFrameHeight="144" maxFrameHeight="2160"
                   minFrameRate="1" maxFrameRate="30" />
   

4. CamcorderProfiles：摄像头专属配置

   <CamcorderProfiles cameraId="0">
     <!-- 针对cameraId=0的配置 -->
   </CamcorderProfiles>
   

理解这些元素的关系后，我们就能针对性地修改配置以满足多路4K录像的需求。

3. 添加4K录像配置与MJPEG支持

默认配置可能不包含4K录像选项或只支持有限的编码格式。我们需要手动添加2160p的EncoderProfile并扩展编码器支持。

3.1 添加H264编码的4K配置

在media_profiles.xml中找到EncoderProfile部分，添加或修改2160p配置：

<EncoderProfile quality="2160p" fileFormat="mp4" duration="30">
  <Video codec="h264"
        bitRate="6000000"
        width="3840"
        height="2160"
        frameRate="30" />
  
  <Audio codec="aac"
        bitRate="61000"
        sampleRate="44100"
        channels="1" />
</EncoderProfile>

参数说明：

• bitRate：6Mbps适合大多数4K场景，可根据需要调整
• frameRate：30fps是流畅视频的常见选择
• audio配置可根据实际需求修改

3.2 添加MJPEG编码支持

某些摄像头可能只提供MJPEG格式的4K输出，需要在配置中添加支持：

<!-- 在VideoEncoderCap部分添加 -->
<VideoEncoderCap name="mjpg" enabled="true"
                minBitRate="64000" maxBitRate="100000000"
                minFrameWidth="176" maxFrameWidth="3840"
                minFrameHeight="144" maxFrameHeight="2160"
                minFrameRate="1" maxFrameRate="30" />

<!-- 添加MJPEG的EncoderProfile -->
<EncoderProfile quality="2160p" fileFormat="mp4" duration="30">
  <Video codec="mjpg"
        bitRate="80000000"
        width="3840"
        height="2160"
        frameRate="30" />
  
  <Audio codec="aac"
        bitRate="128000"
        sampleRate="44100"
        channels="1" />
</EncoderProfile>

MJPEG通常需要更高的比特率（80Mbps）来保证画质，因为它是帧内压缩格式。在实际测试中，我发现MJPEG的CPU占用率会比H264高，但兼容性更好。

4. 扩展多摄像头支持与实战调试

当连接第三个摄像头时，你可能会发现它无法正常工作或分辨率受限，这是因为默认配置通常只定义了cameraId 0和1。

4.1 扩展cameraId范围

修改文件顶部的DTD定义，将cameraId从(0|1)扩展为(0|1|2)：

<!ATTLIST EncoderProfile cameraId (0|1|2) #REQUIRED>

4.2 为新增摄像头添加完整配置

复制现有的CamcorderProfiles块，修改cameraId并确保包含所有必要的分辨率配置：

<CamcorderProfiles cameraId="2">
  <!-- 包含从qcif到2160p的所有EncoderProfile -->
  <EncoderProfile quality="2160p" fileFormat="mp4" duration="30">
    <Video codec="h264"
          bitRate="6000000"
          width="3840"
          height="2160"
          frameRate="30" />
    
    <Audio codec="aac"
          bitRate="61000"
          sampleRate="44100"
          channels="1" />
  </EncoderProfile>
  <!-- 其他分辨率配置... -->
</CamcorderProfiles>

4.3 多路摄像头同步测试

配置完成后，建议通过以下步骤验证多路4K录像是否正常工作：

1. 逐个测试摄像头：

   # 测试第一个摄像头
   gst-launch-1.0 v4l2src device=/dev/video0 ! video/x-raw,width=3840,height=2160 ! autovideosink
   
   # 测试第二个摄像头
   gst-launch-1.0 v4l2src device=/dev/video1 ! video/x-raw,width=3840,height=2160 ! autovideosink
   

2. 检查系统负载：

   watch -n 1 "cat /proc/loadavg"
   

3. 实际录制测试：

   # 同时录制两路4K视频
   gst-launch-1.0 v4l2src device=/dev/video0 ! queue ! video/x-h264,width=3840,height=2160 ! h264parse ! mp4mux ! filesink location=video0.mp4 \
   v4l2src device=/dev/video1 ! queue ! video/x-h264,width=3840,height=2160 ! h264parse ! mp4mux ! filesink location=video1.mp4
   

在实际项目中，我发现RK3588可以稳定处理2-3路4K@30fps的视频流，但具体性能取决于编码格式、比特率和系统优化程度。当遇到性能问题时，可以尝试以下优化：

• 降低帧率（如从30fps降到25fps）
• 使用硬件加速编码
• 调整I帧间隔
• 优化内存和IO性能

5. 高级配置与性能优化

当基本功能实现后，你可能需要进一步优化系统性能和录像质量。

5.1 比特率与画质平衡

不同场景需要不同的比特率设置：

场景类型	推荐比特率(H264)	推荐比特率(MJPEG)
静态场景	4-6 Mbps	40-60 Mbps
一般动态	6-8 Mbps	60-80 Mbps
高速运动	8-12 Mbps	80-100 Mbps

可以通过修改EncoderProfile中的bitRate参数来调整：

<Video codec="h264"
      bitRate="8000000"  <!-- 8Mbps -->
      width="3840"
      height="2160"
      frameRate="30" />

5.2 硬件加速配置

RK3588支持硬件编码加速，可以通过修改media_profiles.xml启用：

<VideoEncoderCap name="h264" enabled="true"
                hwAccelerated="true"
                ... />

同时确保内核配置了相应的硬件编码模块：

# 检查可用编码器
cat /proc/asound/card*/codec* | grep -i encoder

5.3 内存与缓存优化

多路4K视频处理对内存带宽要求很高，建议调整以下内核参数：

# 增加DMA缓冲区大小
echo 2048 > /proc/sys/vm/min_free_kbytes

# 调整swappiness减少交换
echo 10 > /proc/sys/vm/swappiness

在项目实践中，我发现为每路视频流分配独立的IO调度队列可以显著提高稳定性：

# 为每个摄像头设备设置独立的IO调度
echo deadline > /sys/block/mmcblk0/queue/scheduler
echo 256 > /sys/block/mmcblk0/queue/nr_requests

5.4 温度管理与稳定性

长时间多路4K录像会导致芯片温度升高，建议实施温度监控：

# 安装温度监控工具
apt install lm-sensors

# 查看温度
sensors

如果温度过高，可以考虑：

1. 添加散热装置
2. 降低帧率
3. 优化编码参数
4. 启用动态频率调整

# 启用动态调频
echo ondemand > /sys/devices/system/cpu/cpufreq/policy0/scaling_governor