其实音视频主要分为四个方向：
音视频算法方向音视频传输方向音视频生产方向音视频消费方向播放器就是属于音视频消费方向，就是给一个音频或者视频url，然后负责将它渲染出来。
音视频算法方向算法方向主要是音频和视频的编码，基础首先要熟悉音频编码AAC/FLAC/OPUS等音频编码，视频编码H264/HEVC/AV1等视频编码，了解他们的压缩原理和优化逻辑，在掌握这些编码格式的基础上想着如何去优化。
不过这一块的工作还是比较复杂，一般都是硕士起步，不是专门研究的话，很难做出成绩，主要的云服务厂商都是需要这方面的人才的。
普通的音视频开发虽然不要求多熟悉音视频编码，但是基本的了解还是需要的。
还有一些和AI结合的方向，例如视频画质超分、图像分割、回声消除等等，这些有些是专门针对音视频的，有些事和音视频结合的比较紧密。
音视频传输方向传输主要是服务端和客户端的交互模块，例如直播场景中，封装好了音视频数据如何传给服务端，使用的协议是什么？协议如何控制，弱网环境下如何优化。
需要我们对协议有比较深入地研究，例如RTMP、WebRTC、QUIC、TCP、UDP等协议，现在视频会议也比较火热，大多数视频会议都是基于WebRTC开发的，做到一定的程度之后需要自研UDP协议来解决性能瓶颈，这需要比较深厚的功力。
这种方向的工作就更多了，云服务厂商、直播公司等等。
音视频生产方向音视频编辑、录制都是属于生产方向的，这需要会使用音视频编码、封装、相机录制、采集、后期处理。
像剪映这种编辑软件，主要做的是音视频生产的工作，这儿需要比较深入地学习OpenGL相关的知识，滤镜、特效、转场、模板等等，要学的还是挺过的。
随着抖音和快手的强势崛起，主要互联网公司都有自己的音视频编辑产品，头条有剪映，快手有快剪，微信有秒剪。
工作的机会还是比较多的。别灰心啊。
音视频消费方向消费方向就是播放器方向，播放器大家可能觉得没什么可做的，有些人觉得我拿来一个开源库可以播放视频就行了，但是播放器中有很多有意思的功能点：音视频同步、IPC通信、变速不变调等等。
能播放一个视频并不难，但是播放地性能好并不容易。
详细可以看看我之前写的一些文章：
音视频 - 播放器优化完全指南
本人之前是做播放器的，现在做VideoEditor SDK和音视频推流SDK，有关音视频的问题欢迎交流。