都2021了作为一名Android开发者，还不学音视频开发？我劝你早点认清现实！

╰半夏微凉° 2022-12-27 12:52 149阅读 0赞

## 缘起 ##

最近经常遇到一些同学问我如何学习音视频，怎样才能快速上手？还有一些对音视频不了解的同学问我该不该学习音视频？作为一名音视频行业的10年Android老兵，我有一些思考分享给大家，希望能对你有所帮助。

## 大趋势 ##

![dd4268bfa79fa56f46152498b6c9f6b3.png][]

从未来的大趋势来看，随着5G时代的到来，音视频慢慢变成人们日常生活中的必须品。除了在线教育、音视频会议、即时通讯这些必须使用音视频技术的产品外，其它的产品也需要加入音频、视频元素。比如说将现在的网站注册与登陆的图文方式全部改为语音方式是否更加安全？相信随着音视频技术的普及，更加有创意的产品会如雨后春笋般孕育而生。

目前，音视频技术从之前的\*\*“象牙塔”**逐渐走向**“百姓家”\*\*已是不争的事实。正是因为这样一个大的趋势，现在除了各大厂之外，其它一些小厂也开始寻找音视频人才。一名稍好点的音视频人才现在可能会有3-4家公司抢着要、挣着要。

对音视频人才的需求从小众变成了大众，这更多的是大家对未来市场预期的结果。做个不恰当的比喻，3G/4G的出现，促成了移动互联网10年繁荣。而5G的出现，也会促成至少10年音视频行业的繁荣。

\*\*除了5G的到来可以让音视频得到更广范的应用外，音视频技术在未来还有更重要的作用。\*\*事实上，在人类可以识别人信息中，音视频包含的信息是最丰富的，但人类并没有很好的将它们利用起来。

究其原因，是因为这些信息都是非结构化的数据，而人类善长的是处理结构化数据（比如数据库）。而对于这些非结构化的数据却无从下手的，所以这些音视频数据都被白白浪费掉了。

但随着计算机视觉、人工智能的发展，人们开始撑握了如何将音视频这类非结构化数据转化为结构化数据的方法。一旦我们将音视频数据转为结构化数据后，我们就可以利用现有的技术（如搜索引擎、大数据，数据挖掘等）对这些数据进行各种分析了，这个价值是不是更加惊人呢？而这一切的基础都是音视频技术。

所以，音视频研发的未来是极为广阔的。目前可以说是学习音视频的最佳时机，及早的加入音视频研发的队伍，才能使自己在未来的职场上更有作为。

## 音视频就业前景 ##

音视频比普通开发的薪资高出不少，音视频工程开发的薪资比Android应用层开发高出40%。  
![音视频招聘岗位需求][72cec35ee82c15dc75123dc1b1d4a9ee.png]

音视频开发单从薪资的角度考虑是没问题的，要记住薪资水平是市场决定的，市场对音视频需求其实非常大，而且逐年上升，直播、点播、视频会议等等都是这些年起来的项目。而相比较起来，音视频从业者少得可怕。了解到的行情就是几个公司互相挖角，对人才的竞争属于存量搏杀！  
现在企业想要音视频人才基本上是内部培养，因为新人入场的真的很少 ！  
另外，再从抖音做到国际的ins与微信并肩成为国际前几大app就是一个很好的例证，5g的到来，知识碎片化、快餐化、娱乐内容多元化、流量平民化等，未来的发展方向里，短视频、直播一定会占据一席之地，那相应的对于音视频研发的工作人员的需求就绝对不会降低。  
并且不是短期内，而是长期来看，都会这样，科技发展只会越来越快，视频领域会越来越火，需求越来越多。

## 如何学习音视频开发 ##

# 一，初级入门篇： #

**一 绘制图片**

1. ImageView 绘制图片

2. SurfaceView 绘制图片

3. 自定义 View 绘制图片

![format_png][]

**二、AudioRecord API详解**

![format_png 1][]

**三、使用 AudioRecord 实现录音，并生成wav**

*  创建一个AudioRecord对象
 *  初始化一个buffer
 *  开始录音
 *  创建一个数据流，一边从AudioRecord中读取声音数据到初始化的buffer，一边将buffer中数据导入数据流。
 *  关闭数据流
 *  停止录音

![format_png 2][]

**四、用 AudioTrack 播放PCM音频**

1.AudioTrack 基本使用

*  MODE\_STATIC模式
 *  MODE\_STREAM模式

2.AudioTrack 详解

*  音频流的类型
 *  Buffer分配和Frame的概念
 *  AudioTrack构造过程

3. AudioTrack 与 MediaPlayer 的对比

*  区别
 *  联系
 *  SoundPool

![format_png 3][]

**五、使用 Camera API 采集视频数据**

1.预览 Camera 数据

2.取到 NV21 的数据回调

**六、使用 MediaExtractor 和 MediaMuxer API 解析和封装 mp4 文件**

1.MediaExtractor API介绍

2.MediaMuxer API介绍

3.使用情境

![format_png 4][]

七. **MediaCodec API 详解**

1.MediaCodec 介绍

2.MediaCodec API 说明

3.MediaCodec 流控

*  流控基本概念
 *  Android 硬编码流控
 *  Android 流控策略选择

![format_png 5][]

由于文章篇幅受限，剩余内容过多，文中插图有限，下文只能截图目录展示：

# 二，中级进阶篇： #

*  Android OpenGL ES 开发（一）: OpenGL ES 介绍
 *  Android OpenGL ES 开发（二）: OpenGL ES 环境搭建
 *  Android OpenGL ES 开发（三）: OpenGL ES 定义形状
 *  Android OpenGL ES 开发（四）: OpenGL ES 绘制形状
 *  Android OpenGL ES 开发（五）: OpenGL ES 使用投影和相机视图
 *  Android OpenGL ES 开发（六）: OpenGL ES 添加运动效果
 *  Android OpenGL ES 开发（七）: OpenGL ES 响应触摸事件
 *  Android OpenGL ES 开发（八）: OpenGL ES 着色器语言GLSL
 *  Android OpenGL ES 开发（九）: OpenGL ES 纹理贴图
 *  Android OpenGL ES 开发（十）: 通过GLES20与着色器交互
 *  使用 OpenGL 显示一张图片
 *  GLSurfaceviw 绘制 Camera 预览画面及实现拍照
 *  使用OpenGL ES 完成视频的录制，并实现视频水印效果

![format_png 6][]

# 高级探究篇： #

*  深入学习音视频编码，如H.264，AAC，研究使用开源编解码库，如x.264，JM 等
 *  深入研究音视频相关的网络协议，如 rtmp，hls，以及封包格式，如：flv，mp4
 *  深入学习一些音视频领域的开源项目，如 webrtc，ffmpeg，ijkplayer，librtmp 等等
 *  将 ffmpeg 库移植到 Android 平台，结合上面积累的经验，编写一款简易的音视频播放器
 *  将 x264 库移植到 Android 平台，结合上面积累的经验，完成视频数据 H264 软编功能
 *  将 librtmp 库移植到 Android 平台，结合上面积累的经验，完成 Android RTMP 推流功能

**音视频编解码技术**

*  音视频编解码技术（一）：MPEG-4/H.264 AVC 编解码标准
 *  音视频编解码技术（二）：AAC 音频编码技术

**流媒体协议**

*  流媒体协议（一）：HLS 协议
 *  流媒体协议（二）：RTMP协议

**多媒体文件格式**

*  多媒体文件格式（一）：MP4 格式
 *  多媒体文件格式（二）：FLV 格式
 *  多媒体文件格式（三）：M3U8 格式
 *  多媒体文件格式（四）：TS 格式
 *  多媒体文件格式（五）：PCM / WAV 格式

![format_png 7][]

![format_png 8][]

# FFmpeg 学习记录 #

*  FFmpeg命令行工具学习(一)：查看媒体文件头信息工具ffprobe
 *  FFmpeg命令行工具学习(二)：播放媒体文件的工具ffplay
 *  FFmpeg命令行工具学习(三)：媒体文件转换工具ffmpeg
 *  FFmpeg命令行工具学习(四)：FFmpeg 采集设备
 *  FFmpeg命令行工具学习(五)：FFmpeg 调整音视频播放速度

![format_png 9][]

*  FFmpeg 学习(一)：FFmpeg 简介
 *  FFmpeg 学习(二)：Mac下安装FFmpeg
 *  FFmpeg 学习(三)：将 FFmpeg 移植到 Android平台
 *  FFmpeg 学习(四)：FFmpeg API 介绍与通用 API 分析
 *  FFmpeg 学习(五)：FFmpeg 编解码 API 分析
 *  FFmpeg 学习(六)：FFmpeg 核心模块 libavformat 与 libavcodec 分析

![format_png 10][]

*  FFmpeg 结构体学习(一)： AVFormatContext 分析
 *  FFmpeg 结构体学习(二)： AVStream 分析
 *  FFmpeg 结构体学习(三)： AVPacket 分析
 *  FFmpeg 结构体学习(四)： AVFrame 分析
 *  FFmpeg 结构体学习(五)： AVCodec 分析
 *  FFmpeg 结构体学习(六)： AVCodecContext 分析
 *  FFmpeg 结构体学习(七)： AVIOContext 分析
 *  FFmpeg 结构体学习(八)：FFMPEG中重要结构体之间的关系

![format_png 11][]

更多目录截图：

![format_png 12][]

![format_png 13][]

![format_png 14][]

\*\*总结：\*\*以上就是关于音视频的资料最强整理和概括了（还有部分内容没有截图出来），相信应该是全网最全了，所有资料都是免费分享给大家的，也省去了对音视频感兴趣的小伙伴们四处找资料的时间，如果你正好需要可以点此处免费获取

音视频开发的前景，相信大家从相关的招聘网站上就可以看到，不管是流媒体开发还是音视频处理开发，都是大量招人的，并且由于入门门槛相对较高，学习周期长，薪资也是居高不下。

**另外：小编还收集整理一些音视频相关配套视频，相信能使大家学习起来更加快速有效：**

![format_png 15][]

**文中所有资料都是免费分享给大家的，[只需你动动手指点击此处就可直达免费领取方式了。][Link 1]**

**Android架构师之路很漫长， 一起共勉吧！学习之路犹如逆水行舟，不进则退，如果你松懈了， 那么你就退步了，而在Android开发工作中没有一门吃香独特的技术，想拿高薪也只能是望尘莫及的。做个勤奋向上的人，加紧学习，抓住中心，宁精勿杂，宁专勿多。**

如果你正好需要这份完整版Android音视频开发，只需你多多支持我这篇文章。

[**快速入手通道：（点这里）下载！诚意满满！！！**][Link 1]

整理不易，觉得有帮助的朋友可以帮忙点赞分享支持一下小编~

你的支持，我的动力；祝各位前程似锦，offer不断！！！

[dd4268bfa79fa56f46152498b6c9f6b3.png]: /images/20221120/6cdbcf71552643b9a13fe853bddda540.png
[72cec35ee82c15dc75123dc1b1d4a9ee.png]: /images/20221120/a992f435bd6f4772934f0d34f62026b9.png
[format_png]: /images/20221120/2870480097ca4eaf9dece670f7967352.png
[format_png 1]: /images/20221120/12b11eb41fc0440b91b3b27a2782bc1f.png
[format_png 2]: /images/20221120/51a3216a35fa44eaac6ded641d15eaae.png
[format_png 3]: /images/20221120/1c7708f4c5e84da991ebfc61aea79469.png
[format_png 4]: /images/20221120/a9c6bf1f126c42d1bd8655e1a1af58f9.png
[format_png 5]: /images/20221120/bc64501523ea496a9bbdbfc4e3be1afd.png
[format_png 6]: /images/20221120/70197d0b54bb4370bee1de091d28a93b.png
[format_png 7]: /images/20221120/51c4d1cf56d24402a8ebc5f82965c45f.png
[format_png 8]: /images/20221120/1032e00cc8b44397987f718474c1374a.png
[format_png 9]: /images/20221120/73d9ddbd9a414b1dbcfd5799482a6ada.png
[format_png 10]: /images/20221120/a4dcc1ef8e3440198cb8d8cc3a98d1f7.png
[format_png 11]: /images/20221120/a36bb165ab5f4c759b14e0376c05b20e.png
[format_png 12]: /images/20221120/beee93302a754dd3bbf66b87196d445a.png
[format_png 13]: /images/20221120/7059c9e52c914d21b6221c4056db6618.png
[format_png 14]: /images/20221120/71c52c774d8e4847a854d774b6a4ea92.png
[format_png 15]: /images/20221120/b71764f5f90441dda41b3cf818497c9f.png
[Link 1]: https://jq.qq.com/?_wv=1027&k=h4iowon8