MediaForAndroid

• 学习Android多媒体相关

目录

音频相关

• 基础知识

• 音频数据的采集

• 音频数据的播放

• 熟悉Android采集和播放的API: AudioRecord和AudioTrick

• 学习OpenSL ES, 对Android平台的音频进行渲染

• 学习MediaCodec API, 完成音频格式AAC的硬编和硬解

视频相关

• 基础知识

• 使用Android平台的Camera和Camera2两套API进行采集视频数据, 然后利用 SurfaceView、TextureView预览采集到的数据.

• 学习OpenGL ES, 对Android平台的视频进行渲染

• 学习MediaCodec API, 完成视频格式H264的硬编和硬解

小结

• 熟悉MediaExtractor和MediaMuxer的使用, 完成视频音轨和视频轨的分离和合成

• 串联整个音视频录制流程，完成音视频的采集、编码、封包成 mp4 输出

• 串联整个音视频播放流程，完成 mp4 的解析、音视频的解码、播放和渲染

JNI相关

• 熟悉JNI环境

FFmpeg

• 移植FFmpeg到Android平台

• 学习FFmepg, 编写一款简单的视频播放器

业界开源播放器学习

• 深入学习一些音视频领域的开源项目，如 webrtc，ffmpeg，ijkplayer，librtmp 等等

流媒体协议

• 深入研究音视频相关的网络协议，如 rtmp，hls，以及封包格式，如：flv，mp4

项目输出

• 设计一款简单的视频SDK, 包括软解和硬解的兼容

• 基础视频SDK, 设计一款短视频应用

参考资料

• http://blog.51cto.com/ticktick/category15.html

• <<音视频开发进阶指南>>