iOS直播:推流(第五部分)
一.常见流媒体协议
iOS的推流协议,目前最为常用的是RTMP和HLS。
- RTMP是Adobe公司开发的基于TCP的应用层协议,实时性高,一般在3-5s。
- HLS(HTTP Live Streaming)是苹果公司开发的基于HTTP的流媒体传输协议,可实现流媒体的直播和点播,但是由于其原理是将视频流切割成一系列的HTTP下载文件再进行传输,所以HLS有较高的延迟(约30s)。传输内容包括M3U8描述文件和TS媒体文件。
因为HLS相比RTMP具有较高延迟,一般直播都是要求高实时性,所以直播项目中一般都使用RTMP,因此我们下文也只讨论基于RTMP协议的推流。
iOS端采集到视频并编码后推流到服务器端,因此为了演示,我们先在本地搭建个基于Ngnix的直播服务器。
1.安装Nginx
Nginx (engine x) 是一个高性能的HTTP和反向代理服务,也是一个IMAP/POP3/SMTP服务。其特点是占有内存少,并发能力强。
在终端中使用以下命令进行安装
$ brew tap denji/nginx
$ brew install nginx-full --with-upload-module
安装完成后,在终端输入以下命令来启动Nginx
nginx
启动后在浏览器输入http://localhost:8080,显示Nginx的欢迎页面代表运行成功
2.配置RTMP
在Finder中打开/usr/local/etc/nginx/nginx.conf
在最后添加以下内容以支持RTMP协议:
rtmp {
server {
listen 1935;
application rtmplive {
live on;
max_connections 1024;
}
application hls{
live on;
hls on;
hls_path /usr/local/var/www/hls;
hls_fragment 1s;
}
}
}
然后在终端输入以下命令来重启Nginx
nginx -s reload
3.Mac下使用OBS测试推流
我们先在Mac系统进行推流测试,先下载安装OBS(https://download.****.net/download/dolacmeng/10940356),点击右下角的设置,如图输入自定义的推流地址以及流名称
可以添加我们的某个应用窗口作为直播视频来源,如果利用QuickTime播放电影,然后添加QuickTime窗口,那么就可以直播电影了。下面添加了Safari作为视频来源:
设置好后点击右下角开始推流即可。
4.使用VLC查看直播内容
上一步推流后,可以用VLC查看我们推流的内容,打开VCL点击File–Open Network,输入我们上一步输入的推流地址即可播放:
5.改用iOS进行推流
上面我们通过OBS推流到本地Nginx服务器,VCL从Nginx进行拉流播放了。现在我们改为用iOS进行推流。
iOS推流完全自己实现的话代码量巨大,因此我们一般使用第三方库,如VideoCore、LiveVideoCoreSDK、LFLiveKit等。我们下面采用LFLiveKit(https://github.com/LaiFengiOS/LFLiveKit),使用cocoapods集成后只要几行代码即完成采集、编码、推流的工作:
import UIKit
import LFLiveKit
class ViewController: UIViewController {
//MARK: - Getters and Setters
lazy var session: LFLiveSession = {
let audioConfiguration = LFLiveAudioConfiguration.default()
let videoConfiguration = LFLiveVideoConfiguration.defaultConfiguration(for: .low3, outputImageOrientation: .portrait)
let session = LFLiveSession(audioConfiguration: audioConfiguration, videoConfiguration: videoConfiguration)
session?.preView = self.view
return session!
}()
override func viewDidLoad() {
super.viewDidLoad()
// Do any additional setup after loading the view, typically from a nib.
}
@IBAction func startLive(_ sender: UIButton) {
let stream = LFLiveStreamInfo()
stream.url = "rtmp://192.168.1.104:1935/rtmplive/demo";
session.startLive(stream)
session.running = true
}
@IBAction func stopLive(_ sender: UIButton) {
session.stopLive()
}
}
其中stream.url中的ip地址为本机ip,只要iPhone和Mac在同一网络下,既可以通过我们前面配置好的Ngnix服务器进行直播。在系统的网络编好设置中可查看本地ip:
运行iOS demo并点击开始推流后,在VLC即可观看来自iPhone的直播内容:
iOS demo源码:https://github.com/dolacmeng/JXLivePush
推荐阅读
-
iOS直播:推流(第五部分)
-
简单学iOS直播推流,仅需1小时(一):简介
-
简单易懂!Windows和macOS系统下的OBS直播推流指南
-
实现实时推流直播:使用Java连接大华摄像头获取视频流
-
全面梳理Java基础:第五部分——IO流详解
-
视频流媒体服务器 RTSP 拉流、RTMP 推流解决方案 EasyNVR 如何实现将视频推送到其他直播房间?
-
流畅度提高 100%!QUIC 推流解决方案如何实现直播零延迟?
-
腾讯视频直播 02-推流-美颜滤镜 同样,腾讯云提供了 setBeautyFilter 方法来设置美颜风格、磨皮程度、美白程度和泛红程度 //style 磨皮风格:0:平滑 1:自然 2:朦胧 //美容级别:0-9。值为 0 时关闭美颜效果。默认值:0,关闭美颜效果。 //美白级别:取值 0-9。值为 0 时,将关闭美白效果。默认值:0,关闭美白效果。 //ruddyLevel:取值范围为 0-9。值为 0 时关闭美白效果。默认值:0,关闭美白效果。 public boolean setBeautyFilter(int style, int beautyLevel, int whiteningLevel, int ruddyLevel);; public boolean setBeautyFilter(int style, int beautyLevel, int whiteningLevel, int ruddyLevel) 滤镜 setFilter 方法可以设置滤镜效果,滤镜本身是一个直方图文件。setSpecialRatio 方法可以设置滤镜的程度,从 0 到 1,越大滤镜效果越明显,默认值为 0.5。 Bitmap bitmap = BitmapUtils.decodeResource(getResources, R.drawable.langman); if (mLivePusher) if (mLivePusher ! = null) { mLivePusher.setFilter(bmp); } 控制摄像头 腾讯云 sdk 默认为前置摄像头(可以通过修改 TXLivePushConfig 的配置函数 setFrontCamera 来修改默认值),调用一次 switchCamera 就切换一次,注意切换摄像头前要确保 TXLivePushConfig 和 TXLivePusher 对象已经初始化。 mLivePushConfig.setFrontCamera(true); // 默认前置摄像头。 mLivePusher.switchCamera; //切换摄像头。 ⑦ 设置徽标水印 腾讯视频云目前支持两种设置水印的方式:一种是在流媒体 SDK 中设置水印,原理是在 SDK 中对视频进行编码前在画面中设置水印。另一种方式是在云端设置水印,即由云端解析视频并添加水印标识。 建议使用 SDK 添加水印,因为在云端添加水印会有问题。下面是添加水印的 SDK 介绍: //设置视频水印 mLivePushConfig.setWatermark(BitmapFactory.decodeResource(getResources,R.drawable.watermark), 10, 10); // 最后两个参数是视频的水印。 //最后两个参数是水印位置的 X 轴和 Y 轴坐标。 mLivePusher.setConfig(mLivePushConfig); 如果需要对水印图像的位置进行模型适配,则需要调用水印规范化接口。 /设置视频水印 mLivePushConfig.setWatermark(mBitmap, 0.02f, 0.05f, 0.2f); //参数为水印图像。 //参数包括水印图像的位图、水印位置的 X 轴坐标、水印位置的 Y 轴坐标和水印宽度。后三个参数的范围是 [0,1]。 // 最后两个参数是水印位置的 X 轴坐标和 Y 轴坐标。 mLivePusher.setConfig(mLivePushConfig); TXLivePushConfig 中的 setHardwareAcceleration 方法可以启用或禁用硬件编码。 if (mHWVideoEncode){ if (mLivePushConfig ! = null) { if (Build.VERSION.SDK_INT < 18){ Toast.makeText(getApplicationContext, "Hardware acceleration failed, current phone API level is too low (min 18)"、 Toast.LENGTH_SHORT).show; mHWVideoEncode = false; } } } } mLivePushConfig.setHardwareAcceleration(mHWVideoEncode ? TXLiveConstants.ENCODE_VIDEO_HARDWARE : TXLiveConstants.ENCODE_VIDEO_SOFTWARE); mLivePusher.setConfig(mLivePushConfig); // 如果您不确定何时启用硬件加速,建议将其设置为 ENCODE_VIDEO_AUTO。 // 默认情况下启用软件编码,但如果手机的 CPU 使用率超过 80% 或帧速率为 10,SDK 将自动切换到硬件编码。 ⑨ 后台推流 在常规模式下,一旦应用程序进入后台,摄像头捕捉数据的能力就会被 Android 禁用,这意味着 SDK 无法继续捕捉和编码音频和视频数据。如果我们什么都不做,故事就会按照下面的脚本发展: 阶段 1(背景剪切后 10 秒 ->)- CDN 无法将视频流传输给观众,因为没有数据,观众看到的是主帧。 阶段 2(10 秒-> 70 秒)--观众一方的播放器因无法接收到直播流而退出,房间里空无一人。 第 3 阶段(70 秒后)--服务器直接断开了推送流媒体的 RTMP 链接,主播需要重新打开直播才能继续。 主播可能只是短暂地接了一个紧急电话,但各云提供商的安全措施会迫使主播的直播提前结束。 1) 设置 setPauseFlag 在开始推流之前,使用 TXLivePushConfig 的 setPauseImg 接口设置一个等待图像,其含义建议为 "主播将暂时离开,稍后再回来"。
-
腾讯云直播 MLVB 插件不仅可以推流/拉流,这些创新功能一看就懂!
-
如何轻松借助OpenCV进行RTMP直播推流操作指南