• JavaCV的摄像头实战之五:推流


    欢迎访问我的GitHub

    这里分类和汇总了欣宸的全部原创(含配套源码):https://github.com/zq2599/blog_demos

    本篇概览

    • 本文是《JavaCV的摄像头实战》的第五篇,一起来考虑个问题:本地摄像头的内容,如何让网络上的其他人看见?

    • 这就涉及到了推流,如下图,基于JavaCV的应用将摄像头的视频帧推送到媒体服务器,观看者用播放器软件远程连接媒体服务器,就能观看摄像头的内容了:

    在这里插入图片描述

    • 今天的主要工作就是开发上图的JavaCV应用,然后验证功能是否正常;

    编码

    • 《JavaCV的摄像头实战之一:基础》一文创建的simple-grab-push工程中已写好父类AbstractCameraApplication,本篇继续使用该工程,创建子类实现那些抽象方法即可

    • 编码前先回顾父类的基础结构,如下图,粗体是父类定义的各个方法,红色块都是需要子类来实现抽象方法,所以接下来,咱们以本地窗口预览为目标实现这三个红色方法即可:

    在这里插入图片描述

    • 新建文件RecordCamera.java,这是AbstractCameraApplication的子类,其代码很简单,接下来按上图顺序依次说明

    • 《JavaCV的摄像头实战之一:基础》中已部署好了媒体服务器,这里定义一个成员变量保存媒体服务器的推流地址,请您按自己的情况调整:

    private static final String RECORD_ADDRESS = "rtmp://192.168.50.43:21935/hls/camera";
    
    • 还要准备一个成员变量,推流的时候在帧上添加时间戳:
    protected long startRecordTime = 0L;
    
    • 将视频帧推送到媒体服务器的功能来自FrameRecorder,这是个抽象类,本篇用到的是其子类FFmpegFrameRecorder,所以定义FrameRecorder类型的成员变量:
    	// 帧录制器
        protected FrameRecorder recorder;
    
    • 然后是初始化操作,请注意各项参数设置(1280*720分辨率摄像头的情况):
        @Override
        protected void initOutput() throws Exception {
            // 实例化FFmpegFrameRecorder,将SRS的推送地址传入
            recorder = FrameRecorder.createDefault(RECORD_ADDRESS, getCameraImageWidth(), getCameraImageHeight());
    
            // 降低启动时的延时,参考
            // https://trac.ffmpeg.org/wiki/StreamingGuide)
            recorder.setVideoOption("tune", "zerolatency");
            // 在视频质量和编码速度之间选择适合自己的方案,包括这些选项:
            // ultrafast,superfast, veryfast, faster, fast, medium, slow, slower, veryslow
            // ultrafast offers us the least amount of compression (lower encoder
            // CPU) at the cost of a larger stream size
            // at the other end, veryslow provides the best compression (high
            // encoder CPU) while lowering the stream size
            // (see: https://trac.ffmpeg.org/wiki/Encode/H.264)
            // ultrafast对CPU消耗最低
            recorder.setVideoOption("preset", "ultrafast");
            // Constant Rate Factor (see: https://trac.ffmpeg.org/wiki/Encode/H.264)
            recorder.setVideoOption("crf", "28");
            // 2000 kb/s, reasonable "sane" area for 720
            recorder.setVideoBitrate(2000000);
    
            // 设置编码格式
            recorder.setVideoCodec(avcodec.AV_CODEC_ID_H264);
    
            // 设置封装格式
            recorder.setFormat("flv");
    
            // FPS (frames per second)
            // 一秒内的帧数
            recorder.setFrameRate(getFrameRate());
            // Key frame interval, in our case every 2 seconds -> 30 (fps) * 2 = 60
            // 关键帧间隔
            recorder.setGopSize((int)getFrameRate()*2);
    
            // 帧录制器开始初始化
            recorder.start();
        }
    
    • 接下来是output方法,关键是recorder.record,另外要注意时间戳的计算和设置:
        @Override
        protected void output(Frame frame) throws Exception {
            if (0L==startRecordTime) {
                startRecordTime = System.currentTimeMillis();
            }
    
            // 时间戳
            recorder.setTimestamp(1000 * (System.currentTimeMillis()-startRecordTime));
    
            // 存盘
            recorder.record(frame);
        }
    
    • 最后是处理视频的循环结束后,程序退出前要做的事情,即关闭帧抓取器:
        @Override
        protected void releaseOutputResource() throws Exception {
            recorder.close();
        }
    
    • 另外还要注意两帧之间的延时,由于推流涉及到网络,因此不能像本地预览那样根据帧率严格计算,实际间隔要更小一些:
        @Override
        protected int getInterval() {
            // 相比本地预览,推流时两帧间隔时间更短
            return super.getInterval()/4;
        }
    
    • 至此,推流功能已开发完成,再写上main方法,注意参数600表示抓取和录制的操作执行600秒:
        public static void main(String[] args) {
            new RecordCamera().action(600);
        }
    
    • 运行main方法,等到控制台输出下图红框的内容时,表示已经开始推流:

    在这里插入图片描述

    • 用本机或局域网内另一台电脑,用VLC软件打开刚才推流的地址rtmp://192.168.50.43:21935/hls/camera,稍等几秒钟后开始正常播放:

    在这里插入图片描述

    • 还可用VLC的工具查看编码信息:

    在这里插入图片描述

    • 至此,咱们已完成了推流功能,验证远程播放也正常,得益于JavaCV的强大,整个过程是如此的轻松愉快,接下来请继续关注欣宸原创,《JavaCV的摄像头实战》系列还会呈现更多丰富的应用;

    • 此刻聪明的您一定发现了问题:只推视频吗?连声音都没有,就这?没错,接下来的实战,咱们该挑战音频处理了

    源码下载

    名称 链接 备注
    项目主页 https://github.com/zq2599/blog_demos 该项目在GitHub上的主页
    git仓库地址(https) https://github.com/zq2599/blog_demos.git 该项目源码的仓库地址,https协议
    git仓库地址(ssh) git@github.com:zq2599/blog_demos.git 该项目源码的仓库地址,ssh协议
    • 这个git项目中有多个文件夹,本篇的源码在javacv-tutorials文件夹下,如下图红框所示:

    在这里插入图片描述

    • javacv-tutorials里面有多个子工程,《JavaCV的摄像头实战》系列的代码在simple-grab-push工程下:

    在这里插入图片描述

    你不孤单,欣宸原创一路相伴

    https://github.com/zq2599/blog_demos

  • 相关阅读:
    JMeter性能测试
    CentOS7下安装elsticsearch、kibana、filebeat、logstash服务
    Docker容器 之 Harbor 私有镜像仓库的搭建
    Vagrant and VirtualBox 构建 CentOS7
    java 位运算 之 左移和右移理解
    List如果一边遍历,一边删除,且不会报错呢?
    享元模式
    装饰器模式
    日常记录
    销售与营销有什么区别?
  • 原文地址:https://www.cnblogs.com/bolingcavalry/p/15873597.html
Copyright © 2020-2023  润新知