一、前言
本系列文章是对音视频技术入门知识的整理和复习,为进一步深入系统研究音视频技术巩固基础。文章列表:
- 01-📝音视频技术核心知识|了解音频技术【移动通信技术的发展、声音的本质、深入了解音频】
- 02-📝音视频技术核心知识|搭建开发环境【FFmpeg与Qt、Windows开发环境搭建、Mac开发环境搭建、Qt开发基础】
- 03-📝音视频技术核心知识|Qt开发基础【
.pro文件的配置、Qt控件基础、信号与槽】 - 04-📝音视频技术核心知识|音频录制【命令行、C++编程】
- 05-📝音视频技术核心知识|音频播放【播放PCM、WAV、PCM转WAV、PCM转WAV、播放WAV】
- 06-📝音视频技术核心知识|音频重采样【音频重采样简介、用命令行进行重采样、通过编程重采样】
- 07-📝音视频技术核心知识|AAC编码【AAC编码器解码器、编译FFmpeg、AAC编码实战、AAC解码实战】
- 08-📝音视频技术核心知识|成像技术【重识图片、详解YUV、视频录制、显示BMP图片、显示YUV图片】
- 09-📝音视频技术核心知识|视频编码解码【了解H.264编码、H.264编码、H.264编码解码】
- 10-📝音视频技术核心知识|RTMP服务器搭建【流媒体、服务器环境】
二、流媒体
1. 基本概念
流媒体（Streaming media），也叫做：流式媒体。
- 是指将一连串的多媒体数据压缩后，经过互联网分段发送数据，在互联网上即时传输影音以供观赏的一种技术与过程
- 此技术使得数据包可以像流水一样发送，如果不使用此技术，就必须得先下载整个媒体文件才能进行观看
流媒体的一个非常典型、火爆的应用场景：直播。近几年，直播行业是蒸蒸日上。
2. 直播架构
下面放几张图片，简单了解一下直播技术的基本架构。
- 简单
- 详细
你可能会有个疑问：信令服务器是干嘛用的？用来处理分享端和观看端的一些信令指令，比如创建房间、加入房间等。
- 京东云
- 百度智能云
用文字总结一下基本流程是：
- 分享端（比如主播） -> 产生音视频 -> 编码压缩音视频 -> 推流到服务器
- 观看端（比如观众） -> 从服务器拉流 -> 解码解压缩音视频 -> 播放音视频
3. 推拉流
- 推流：通过流媒体协议，将音视频数据发送到流媒体服务器
- 拉流：通过流媒体协议，从流媒体服务器上拉取获得音视频数据
4. 流媒体协议
常见的流媒体协议有：RTMP、HLS等。
- RTMP（Real-Time Messaging Protocol）
- 译为：实时消息传输协议，由Adobe公司出品
- 默认基于TCP的1935端口
- HLS（HTTP Live Streaming）
- 基于HTTP的流媒体网络传输协议，苹果公司出品
- 参考：RFC 8216
本文主要介绍RTMP协议相关知识。
5. 服务器环境
首先，要搭建好RTMP服务器环境，主要步骤如下：
- 安装虚拟机VMWare或Parallels Desktop
- 我这里安装的是VMWare
- 在虚拟机上安装CentOS系统
- CentOS是Linux系统的一种，这里用7.6版本，建议跟我的版本保持一致
- 在CentOS系统中安装nginx、nginx-rtmp-module
- nginx：一款高性能的开源web服务器
- nginx-rtmp-module：让nginx支持rtmp
- 配置nginx
- 启动nginx
6. 安装CentOS
6.1 下载CentOS
推荐网站：centoschina，上面有CentOS的各种版本，这里下载CentOS-7-x86_64-DVD-1810.iso，大小是4G多。
7. 安装nginx
在nginx官网下载目前最新的稳定版：nginx-1.20.1.tar.gz。
8. 安装nginx-rtmp-module
在nginx-rtmp-module的github下载目前最新的稳定版：v1.2.2.tar.gz。
9. 配置nginx
10. 启动nginx
11. 一些步骤和命令整理
- 安装依赖
yum install -y gcc pcre pcre-devel zlib zlib-devel openssl openssl-devel - 设置共享文件夹
- 查看共享成功与否
- vmware-hgfsclient
- 挂载到对应目录（这里放mnt）
- vmhgfs-fuse .host:/共享目录名称 /mnt/目录名称
- 查看共享成功与否
- 解压ngnix相关内容
- cp 源 目标
- tar -zxvf 解压文件
- 进入nginx目录，执行configure进行配置
./configure --prefix=/usr/local/nginx --add-module=ngnix的rtmp模块目录 --with-http_ssl_module - 修改nginx配置
- vim conf/nginx.conf
rtmp { server { listen 1935; # 端口 chunk_size 4000; application live { # 请求路径 live on; } } }
- vim conf/nginx.conf
- 配置PATH
- export PATH=$PATH:/usr/local/nginx/sbin
- 启动nginx
- nginx
- 查看
- 端口占用：lsof -i:1935
- 杀死进程：kill -9 pid
- 如果远程连接不上rtmp服务器，有可能是因为防火墙把1935端口关掉了
# 查看端口情况（返回no代表被关闭了） firewall-cmd --query-port=1935/tcp # 拿到zone名称（一般是public） firewall-cmd --get-active-zones # 打开端口 firewall-cmd --zone=public --add-port=1935/tcp --permanent # 重启防火墙（再次查看端口情况，应该会返回yes了） firewall-cmd --reload - ffmpeg推流
ffmpeg -i xx.mp4 -f flv rtmp://ip地址:1935/live/xx - ffmpeg拉流
ffplay rtmp://ip地址:1935/live/xx
专题系列文章
1. 前知识
- 01-探究iOS底层原理|综述
- 02-探究iOS底层原理|编译器LLVM项目【Clang、SwiftC、优化器、LLVM】
- 03-探究iOS底层原理|LLDB
- 04-探究iOS底层原理|ARM64汇编
2. 基于OC语言探索iOS底层原理
- 05-探究iOS底层原理|OC的本质
- 06-探究iOS底层原理|OC对象的本质
- 07-探究iOS底层原理|几种OC对象【实例对象、类对象、元类】、对象的isa指针、superclass、对象的方法调用、Class的底层本质
- 08-探究iOS底层原理|Category底层结构、App启动时Class与Category装载过程、load 和 initialize 执行、关联对象
- 09-探究iOS底层原理|KVO
- 10-探究iOS底层原理|KVC
- 11-探究iOS底层原理|探索Block的本质|【Block的数据类型(本质)与内存布局、变量捕获、Block的种类、内存管理、Block的修饰符、循环引用】
- 12-探究iOS底层原理|Runtime1【isa详解、class的结构、方法缓存cache_t】
- 13-探究iOS底层原理|Runtime2【消息处理(发送、转发)&&动态方法解析、super的本质】
- 14-探究iOS底层原理|Runtime3【Runtime的相关应用】
- 15-探究iOS底层原理|RunLoop【两种RunloopMode、RunLoopMode中的Source0、Source1、Timer、Observer】
- 16-探究iOS底层原理|RunLoop的应用
- 17-探究iOS底层原理|多线程技术的底层原理【GCD源码分析1:主队列、串行队列&&并行队列、全局并发队列】
- 18-探究iOS底层原理|多线程技术【GCD源码分析1:dispatch_get_global_queue与dispatch_(a)sync、单例、线程死锁】
- 19-探究iOS底层原理|多线程技术【GCD源码分析2:栅栏函数dispatch_barrier_(a)sync、信号量dispatch_semaphore】
- 20-探究iOS底层原理|多线程技术【GCD源码分析3:线程调度组dispatch_group、事件源dispatch Source】
- 21-探究iOS底层原理|多线程技术【线程锁：自旋锁、互斥锁、递归锁】
- 22-探究iOS底层原理|多线程技术【原子锁atomic、gcd Timer、NSTimer、CADisplayLink】
- 23-探究iOS底层原理|内存管理【Mach-O文件、Tagged Pointer、对象的内存管理、copy、引用计数、weak指针、autorelease
3. 基于Swift语言探索iOS底层原理
关于函数、枚举、可选项、结构体、类、闭包、属性、方法、swift多态原理、String、Array、Dictionary、引用计数、MetaData等Swift基本语法和相关的底层原理文章有如下几篇:
- 01-📝Swift5常用核心语法|了解Swift【Swift简介、Swift的版本、Swift编译原理】
- 02-📝Swift5常用核心语法|基础语法【Playground、常量与变量、常见数据类型、字面量、元组、流程控制、函数、枚举、可选项、guard语句、区间】
- 03-📝Swift5常用核心语法|面向对象【闭包、结构体、类、枚举】
- 04-📝Swift5常用核心语法|面向对象【属性、inout、类型属性、单例模式、方法、下标、继承、初始化】
- 05-📝Swift5常用核心语法|高级语法【可选链、协议、错误处理、泛型、String与Array、高级运算符、扩展、访问控制、内存管理、字面量、模式匹配】
- 06-📝Swift5常用核心语法|编程范式与Swift源码【从OC到Swift、函数式编程、面向协议编程、响应式编程、Swift源码分析】
4. C++核心语法
- 01-C++核心语法|C++概述【C++简介、C++起源、可移植性和标准、为什么C++会成功、从一个简单的程序开始认识C++】
- 02-📝C++核心语法|C++对C的扩展【::作用域运算符、名字控制、struct类型加强、C/C++中的const、引用(reference)、函数】
- 03-📝C++核心语法|面向对象1【 C++编程规范、类和对象、面向对象程序设计案例、对象的构造和析构、C++面向对象模型初探】
- 04-📝C++核心语法|面向对象2【友元、内部类与局部类、强化训练(数组类封装)、运算符重载、仿函数、模板、类型转换、 C++标准、错误&&异常、智能指针】
- 05-📝C++核心语法|面向对象3【 继承和派生、多态、静态成员、const成员、引用类型成员、VS的内存窗口】
5. Vue全家桶
- 01-📝Vue全家桶核心知识|Vue基础【Vue概述、Vue基本使用、Vue模板语法、基础案例、Vue常用特性、综合案例】
- 02-📝Vue全家桶核心知识|Vue常用特性【表单操作、自定义指令、计算属性、侦听器、过滤器、生命周期、综合案例】
- 03-📝Vue全家桶核心知识|组件化开发【组件化开发思想、组件注册、Vue调试工具用法、组件间数据交互、组件插槽、基于组件的
- 04-📝Vue全家桶核心知识|多线程与网络【前后端交互模式、promise用法、fetch、axios、综合案例】
- 05-📝Vue全家桶核心知识|Vue Router【基本使用、嵌套路由、动态路由匹配、命名路由、编程式导航、基于vue-router的案例】
- 06-📝Vue全家桶核心知识|前端工程化【模块化相关规范、webpack、Vue 单文件组件、Vue 脚手架、Element-UI 的基本使用】
- 07-📝Vue全家桶核心知识|Vuex【Vuex的基本使用、Vuex中的核心特性、vuex案例】
6. 音视频技术核心知识
- 01-📝音视频技术核心知识|了解音频技术【移动通信技术的发展、声音的本质、深入了解音频】
- 02-📝音视频技术核心知识|搭建开发环境【FFmpeg与Qt、Windows开发环境搭建、Mac开发环境搭建、Qt开发基础】
- 03-📝音视频技术核心知识|Qt开发基础【
.pro文件的配置、Qt控件基础、信号与槽】 - 04-📝音视频技术核心知识|音频录制【命令行、C++编程】
- 05-📝音视频技术核心知识|音频播放【播放PCM、WAV、PCM转WAV、PCM转WAV、播放WAV】
- 06-📝音视频技术核心知识|音频重采样【音频重采样简介、用命令行进行重采样、通过编程重采样】
- 07-📝音视频技术核心知识|AAC编码【AAC编码器解码器、编译FFmpeg、AAC编码实战、AAC解码实战】
- 08-📝音视频技术核心知识|成像技术【重识图片、详解YUV、视频录制、显示BMP图片、显示YUV图片】
- 09-📝音视频技术核心知识|视频编码解码【了解H.264编码、H.264编码、H.264编码解码】
- 10-📝音视频技术核心知识|RTMP服务器搭建【流媒体、服务器环境】
其它底层原理专题
1. 底层原理相关专题
2. iOS相关专题
- 01-iOS底层原理|iOS的各个渲染框架以及iOS图层渲染原理
- 02-iOS底层原理|iOS动画渲染原理
- 03-iOS底层原理|iOS OffScreen Rendering 离屏渲染原理
- 04-iOS底层原理|因CPU、GPU资源消耗导致卡顿的原因和解决方案
