讲师中心 微信公众号
AI工具推荐 视频效率加速

Android 高速视频录制中实现帧级实时分析的正确方法

冬雪酱_6443

冬雪酱_6443

发布时间:2026-10-20 15:28:04

|

463人浏览过

|

来源于php中文网

原创

Android 高速视频录制中实现帧级实时分析的正确方法

在使用 camera2 constrainedhighspeedcapturesession 进行 120fps 视频录制时,无法通过 imagereader 获取预览帧——因其仅支持预览(surfaceview/surfacetexture)或录制(mediarecorder/mediacodec)两类 surface,而 imagereader 不在此列。

在使用 camera2 constrainedhighspeedcapturesession 进行 120fps 视频录制时,无法通过 imagereader 获取预览帧——因其仅支持预览(surfaceview/surfacetexture)或录制(mediarecorder/mediacodec)两类 surface,而 imagereader 不在此列。

Android 的 CameraConstrainedHighSpeedCaptureSession 是专为高帧率(如 120FPS)视频录制设计的受限会话模式。正如其名,“constrained” 意味着它对输出 Surface 类型有严格限制:仅允许最多两个 Surface,且必须是以下之一:

  • 预览用 Surface:来自 SurfaceView 或 SurfaceTexture
  • 录制用 Surface:来自 MediaRecorder.getSurface() 或 MediaCodec.createInputSurface()

因此,你当前尝试通过 ImageReader.newInstance(...) 创建 YUV 帧接收器并将其作为 Target Surface 添加到高速会话中,将必然失败,并抛出类似 Surface is not supported 的异常——因为 ImageReader.getSurface() 明确不在白名单内。

✅ 正确可行的替代方案是:利用 SurfaceTexture 实现 GPU 端帧级分析

Android Remote Control
Android Remote Control

远程控制 Android 设备,支持截图、自动化操作手机 App 等功能。本应用使用 uiautomator2 作为底层框架,通过 ADB 连接设备,用户无需 Root(1)查看手机屏幕;(2)自动化操作手机 App;(3)远程安装/卸载应用……

下载

SurfaceTexture 允许你将相机输出渲染至 OpenGL ES 纹理,从而在不阻塞高速流水线的前提下,以低延迟方式访问每一帧(通过 onFrameAvailable() 回调触发)。典型流程如下:

private lateinit var surfaceTexture: SurfaceTexture
private val textureId = IntArray(1)

// 1. 创建 OpenGL 纹理
GLES20.glGenTextures(1, textureId, 0)
surfaceTexture = SurfaceTexture(textureId[0]).apply {
    setDefaultBufferSize(previewSize.width, previewSize.height)
    setOnFrameAvailableListener { 
        // ✅ 每帧到达时回调(注意:需在 GL 线程中 updateTexImage())
        handler.obtainMessage(MSG_UPDATE_TEXTURE).sendToTarget()
    }
}

// 2. 将 SurfaceTexture 传入高速会话(合法!)
val previewSurface = surfaceTexture.surface
val recordingSurface = mediaRecorder.surface // 或 MediaCodec 输入 Surface

cameraDevice.createConstrainedHighSpeedCaptureSession(
    listOf(previewSurface, recordingSurface),
    object : CameraCaptureSession.StateCallback() { /* ... */ },
    backgroundHandler
)

⚠️ 注意事项:

  • SurfaceTexture.updateTexImage() 必须在绑定该纹理的 OpenGL 上下文线程中调用(不可在主线程或任意 Handler 线程直接执行),建议使用 HandlerThread + EGLContext 构建专用 GL 线程;
  • 若需 CPU 端图像数据(如 OpenCV 处理),可在 GL 线程中调用 glReadPixels() 同步读取,但会显著增加 GPU-CPU 同步开销,可能影响 120FPS 稳定性;
  • 避免在 onFrameAvailable 中执行耗时操作(如 JNI 计算、内存拷贝),应仅作信号通知,将分析逻辑异步分发至工作线程;
  • CameraX 当前(截至 AndroidX Camera 1.3)确实不支持 Constrained High Speed 模式,故 Camera2 是唯一可选路径。

? 总结:不要尝试绕过约束强行注入 ImageReader;拥抱 SurfaceTexture + GPU 流水线,是兼顾性能与灵活性的工程最优解。如需进一步降低延迟,可结合 AHardwareBuffer 和 Vulkan(Android 10+)实现零拷贝纹理共享。

热门AI工具

更多
SkildArt
SkildArt Hot

SkildArt是一款AI文本写作工具,一站式 AI 视觉创作平台。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

相关专题

更多
android开发三大框架
android开发三大框架

android开发三大框架是XUtil框架、volley框架、ImageLoader框架。本专题为大家提供android开发三大框架相关的各种文章、以及下载和课程。

902

2023.08.14

android是什么系统
android是什么系统

Android是一种功能强大、灵活可定制、应用丰富、多任务处理能力强、兼容性好、网络连接能力强的操作系统。本专题为大家提供android相关的文章、下载、课程内容,供大家免费下载体验。

2667

2023.08.22

android权限限制怎么解开
android权限限制怎么解开

android权限限制可以使用Root权限、第三方权限管理应用程序、ADB命令和Xposed框架解开。详细介绍:1、Root权限,通过获取Root权限,用户可以解锁所有权限,并对系统进行自定义和修改;2、第三方权限管理应用程序,用户可以轻松地控制和管理应用程序的权限;3、ADB命令,用户可以在设备上执行各种操作,包括解锁权限;4、Xposed框架,用户可以在不修改系统文件的情况下修改应用程序的行为和权限。

5137

2023.09.19

android重启应用的方法有哪些
android重启应用的方法有哪些

android重启应用有通过Intent、PendingIntent、系统服务、Runtime等方法。本专题为大家提供Android相关的文章、下载、课程内容,供大家免费下载体验。

665

2023.10.18

Android语音播放功能实现方法
Android语音播放功能实现方法

实现方法有使用MediaPlayer实现、使用SoundPool实现两种。可以根据具体的需求选择适合的方法进行实现。想了解更多语音播放的相关内容,可以阅读本专题下面的文章。

964

2024.03.01

OpenJDK JVM参数怎么调优
OpenJDK JVM参数怎么调优

Java应用运行缓慢,如何调整JVM参数?本专题介绍OpenJDK JVM性能调优的基本流程,涵盖性能指标确认、运行数据采集、内存配置和垃圾回收分析,帮助你先定位瓶颈,再通过对照测试验证效果,避免直接套用参数而影响应用稳定性。

60

2026.10.16

OpenJDK怎么配置Java开发环境
OpenJDK怎么配置Java开发环境

怎样用OpenJDK搭建开发环境?本专题介绍版本选择、下载安装、环境变量配置和编译运行验证,帮助你理清JDK的作用及基本配置流程,并通过简单程序检查环境是否可用,为后续项目开发做好准备。

40

2026.10.16

OpenJDK怎么部署Java应用
OpenJDK怎么部署Java应用

Java项目开发完成后,怎样部署到目标环境并正常运行?本专题介绍OpenJDK应用部署流程,涵盖运行环境准备、版本兼容检查、应用打包、启动参数配置和日志查看,帮助你理清部署前后的操作顺序,减少环境差异造成的运行问题。

40

2026.10.16

Revel框架模板渲染与表单验证
Revel框架模板渲染与表单验证

本专题围绕Revel框架视图层开发,介绍模板语法、变量输出、布局复用、表单提交、参数绑定与验证规则,帮助开发者完成安全规范的页面交互。

20

2026.10.16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Excel 教程
Excel 教程

共162课时 | 44.4万人学习

Java 教程
Java 教程

共578课时 | 192.4万人学习

Uniapp从零开始实现新闻资讯应用
Uniapp从零开始实现新闻资讯应用

共64课时 | 9.6万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn