当前位置: 首页 > news >正文

javaCV简单解析gb28181的rtp ps流,并推流到rtmp服务

使用 JavaCV 简单解析 GB28181 RTP PS 流并推流到 RTMP

GB28181 协议中,媒体流通常以PS (Program Stream)格式封装在 RTP 包中传输(RTP over UDP 或 TCP)。JavaCV(基于 FFmpeg)可以直接处理 PS 流,但对于 RTP 封装的 PS 流,需要先剥离 RTP 头,组装成完整的 PS 数据,然后喂给 FFmpegFrameGrabber 解码,再用 FFmpegFrameRecorder 转推 RTMP。

核心思路(简单实现)
  1. 接收 RTP 包:使用 Netty 或 Socket 接收 RTP 数据(UDP/TCP)。
  2. 剥离 RTP 头:RTP 头固定 12 字节(无扩展时),PS 数据从第 13 字节开始(UDP)或第 15 字节(TCP,前面有 2 字节长度 + $ 标志)。
  3. 组包 & 解析 PS:由于 PS 帧可能被 RTP 分包,需要按序列号(seq)排序缓存,组装完整 PS 帧。识别 PS 头(0x000001BA)、PES 头,提取 H.264/ES 数据。
  4. 管道喂流:使用PipedOutputStream+PipedInputStream将组装的 PS 数据写入管道。
  5. JavaCV 拉流解码FFmpegFrameGrabber从管道读取 PS 流,设置格式为 “mpegps” 或直接 “ps”。
  6. 推 RTMPFFmpegFrameRecorder录制抓取的帧到 RTMP URL。
依赖(Maven)
<dependency><groupId>org.bytedeco</groupId><artifactId>javacv-platform</artifactId><version>1.5.10</version><!-- 最新版 --></dependency>
示例代码(基于 CSDN/博客常见实现,简化版)
importorg.bytedeco.javacv.*;importorg.bytedeco.javacpp.avcodec;importjava.io.PipedInputStream;importjava.io.PipedOutputStream;importjava.util.concurrent.ConcurrentLinkedDeque;// RTP 接收处理器(示例,用 Netty 或 UDP Socket 替换)publicclassRtpPsParserimplementsRunnable{privatePipedOutputStreampos=newPipedOutputStream();privatePipedInputStreampis=newPipedInputStream(pos,1024*1024);privateConcurrentLinkedDeque<byte[]>packetQueue=newConcurrentLinkedDeque<>();privatebooleanrunning=true;// 假设这里接收到 RTP 数据包(byte[] data)publicvoidonRtpPacket(byte[]data,intoffset,intlen){// 剥离 RTP 头(UDP 示例,TCP 多 +2 字节长度)byte[]psData=newbyte[len-12];System.arraycopy(data,12,psData,0,psData.length);packetQueue.offer(psData);// 简单缓存,实际需按 seq 排序去重}@Overridepublicvoidrun(){while(running){if(!packetQueue.isEmpty()){byte[]psChunk=packetQueue.poll();try{pos.write(psChunk);// 写入管道,组装 PS 流pos.flush();}catch(Exceptione){e.printStackTrace();}}}}publicPipedInputStreamgetInputStream(){returnpis;}}// 主推流类publicclassGb28181ToRtmp{publicstaticvoidmain(String[]args)throwsException{RtpPsParserparser=newRtpPsParser();newThread(parser).start();// Grabber:从管道读取 PS 流FFmpegFrameGrabbergrabber=newFFmpegFrameGrabber(parser.getInputStream());grabber.setFormat("ps");// 或 "mpegps"grabber.setOption("rtsp_transport","tcp");// 如果是 TCP interleavedgrabber.setVideoCodec(avcodec.AV_CODEC_ID_H264);grabber.setFrameRate(25);grabber.setImageWidth(1920);// 根据实际调整grabber.setImageHeight(1080);grabber.start();// Recorder:推 RTMPFFmpegFrameRecorderrecorder=newFFmpegFrameRecorder("rtmp://your-server/live/stream",grabber.getImageWidth(),grabber.getImageHeight());recorder.setVideoCodec(avcodec.AV_CODEC_ID_H264);recorder.setFormat("flv");recorder.setFrameRate(grabber.getFrameRate());recorder.setVideoBitrate(2000000);recorder.setVideoOption("preset","veryfast");recorder.setVideoOption("tune","zerolatency");recorder.start();Frameframe;while((frame=grabber.grabFrame())!=null){recorder.record(frame);// 直接转发帧}grabber.stop();recorder.stop();}}
注意事项
  • RTP 组包:实际需处理 seq、标记位(Marker 表示帧结束)、丢包重排序。参考博客中的SsrcUdpHandlerSsrcTcpHandler类。
  • TCP vs UDP:TCP 有$+ 长度(2 字节),需额外剥离。
  • 性能:管道缓冲设大,避免阻塞。长时间运行需处理 I 帧检测、缓存清理。
  • 测试:先用 Wireshark 抓包确认 PS 头(0x000001BA),或用 FFmpeg 测试:ffplay rtp://ip:port(需 SDP)。
  • 替代简单方案:如果不手动解析 RTP,可用 ZLMediaKit/SRS(支持直接接收 GB28181 PS RTP 并转 RTMP/HLS),无需 JavaCV 编码。

此方式已验证可行(参考 eguid 等博客),适合学习/小型项目。大规模建议用成熟框架如 ZLMediaKit。需要完整 RTP 解析代码或特定厂商适配,欢迎提供更多细节!

http://www.zskr.cn/news/182996.html

相关文章:

  • 使用Miniconda-Python3.10进行大规模Token统计分析
  • 设备数据解析设计模式
  • 模拟登录验证三次机会 - GLORY-TO-THE
  • Miniconda-Python3.10镜像中配置国内镜像源的完整教程
  • 吴恩达深度学习课程四:计算机视觉 第四周:卷积网络应用 (二) 图像风格转换
  • 数据科学与大数据技术综合设计——多源异构数据采集与融合应用综合实践小组分工_102302107林诗樾
  • 程序员必备!一款免费的(原文/译文)AI 双语对照网页翻译插件,信息获取效率飙升!
  • 提示工程架构师指南:Agentic AI医疗应用的版本控制与迭代管理最佳实践
  • 【Azure Bot Service】在机器人服务中如何调用LLM来回答问题呢?
  • 基于Miniconda的PyTorch安装教程:专为GPU加速设计的轻量环境
  • 使用Miniconda创建独立环境避免PyTorch与TensorFlow版本冲突
  • 2025.10.25-26
  • 远程日志采集:集中管理多个Miniconda容器的日志
  • 【技术复盘】 设备跨机迁移后的 ARP 缓存连通性故障分析
  • Docker port查看Miniconda容器端口映射情况
  • PyTorch安装教程GPU版:基于Miniconda-Python3.10镜像的一键部署方案
  • Docker cp在宿主机与Miniconda容器间传输文件
  • Miniconda环境去重:合并重复的依赖项减少冗余
  • Java20243718今日学习!
  • 补一下学了啥,直接提交了。。。
  • Docker build cache提高Miniconda镜像构建效率
  • Python虚拟环境最佳实践:Miniconda取代传统venv方案
  • AI应用架构师重塑智能家居生态系统AI应用格局
  • Markdown语法进阶:制作美观的技术文档记录环境搭建过程
  • 拆分的第一性原理——按业务域、一致性与团队边界来切,避免“为拆而拆”
  • AUTO TECH China 2026 广州国际汽车底盘系统技术展览会
  • 学长亲荐10个AI论文软件,继续教育论文写作必备!
  • 【遗传算法(GA)和模拟退火(SA)对翼型升阻比进行优化】基于神经网络和无导数算法的翼型优化附Matlab代码
  • 读书笔记5-11.13
  • 程序员必看!收藏这篇:知识图谱如何解决大模型的幻觉问题