RTC程序設計：實時音視頻權威指南

第1章  信息與傳輸
 1.1 背景介紹
  1.1.1 電報與無線電
  1.1.2 計算機與互聯(lián)網(wǎng)
  1.1.3 主流平臺簡介
  1.1.4 跨平臺開發(fā)
 1.2 二進制世界
  1.2.1 一切皆比特
  1.2.2 字節(jié)管理類
  1.2.3 BufferViewer
 1.3 文本表示
  1.3.1 ASCII 到 GBK
  1.3.2 Unicode 與 UTF-8
  1.3.3 TextViewer
 1.4 網(wǎng)絡編程
  1.4.1 網(wǎng)絡協(xié)議
  1.4.2 Socket與線程模型
  1.4.3 HelloRTC 服務器
  1.4.4 HelloRTC 客戶端
第2章  視頻幀與采集
 2.1 像素與圖像
  2.1.1 視覺物理
  2.1.2 像素與顏色空間
  2.1.3 位圖與視頻幀
 2.2 視頻采集設備
  2.2.1 采集設備枚舉
  2.2.2 圖像采集參數(shù)
  2.2.3 設備的熱插拔通知
 2.3 平臺采集接口
  2.3.1 Windows 視頻采集
  2.3.2 macOS/iOS 視頻采集
  2.3.3 Android 視頻采集
  2.3.4 屏幕流與外部源
 2.4 編碼前處理
  2.4.1 時間戳與計時
  2.4.2 旋轉角與朝向
  2.4.3 視頻前處理
  2.4.4 管理視頻幀
第3章  視頻渲染
 3.1 視頻渲染基礎
  3.1.1 渲染設備
  3.1.2 渲染技術
  3.1.3 渲染流水線
 3.2 平臺渲染接口
  3.2.1 Windows 渲染
  3.2.2 macOS/iOS 渲染
  3.2.3 Android 渲染
  3.2.4 Linux 渲染
 3.3 跨平臺渲染
  3.3.1 OpenGL編程
  3.3.2 著色器編程
 3.4 數(shù)字圖像與視頻
  3.4.1 視頻格式簡介
  3.4.2 AVI文件格式
第4章  音頻采集
 4.1 聲音與音頻幀
  4.1.1 聲音的物理屬性
  4.1.2 數(shù)字化音頻
  4.1.3 WAV文件與播放
 4.2 音頻采集設備
  4.2.1 采集設備枚舉
  4.2.2 音量與靜音
  4.2.3 設備變更通知
  4.2.4 音頻路由選擇
 4.3 平臺采集接口
  4.3.1 Windows音頻數(shù)據(jù)采集
  4.3.2 macOS/iOS 音頻數(shù)據(jù)采集
  4.3.3 Android 音頻數(shù)據(jù)采集
 4.4 音頻預處理
  4.4.1 回聲消除AEC
  4.4.2 自動增益控制AGC
  4.4.3 主動噪聲抑制ANS
  4.4.4 語音活動檢測VAD
第5章  音頻渲染
 5.1 音頻渲染基礎
  5.1.1 數(shù)字音頻簡介
  5.1.2 音頻渲染設備
  5.1.3 音畫同步
 5.2 平臺渲染接口
  5.2.1 Windows 音頻渲染
  5.2.2 macOS 音頻渲染
  5.2.3 iOS 音頻渲染
  5.2.4 Android 音頻渲染
 5.3 高級音頻渲染
  5.3.1 混音與均衡
  5.3.2 重采樣
  5.3.3 空間音頻
  5.3.4 音效技術
第6章  編解碼壓縮技術
 6.1 文本壓縮
  6.1.1 文本壓縮簡介
  6.1.2 霍夫曼編碼
  6.1.3 Deflate編解碼
 6.2 圖像壓縮
  6.2.1 圖像壓縮簡介
  6.2.2 JPEG文件格式
  6.2.3 JPEG解碼
 6.3 視頻編解碼
  6.3.1 視頻編解碼器
  6.3.2 MP4文件格式
  6.3.3 比特率調整算法
 6.4 音頻編解碼
  6.4.1 音頻編解碼器
  6.4.2 MP3文件格式
  6.4.3 Opus編解碼
第7章  信令與媒體協(xié)商
 7.1 信令技術
  7.1.1 信令通道
  7.1.2 WebRTC 基礎概念
  7.1.3 RTC 信令設計
  7.1.4 配置與連接點獲取
 7.2 媒體描述
  7.2.1 SDP格式
  7.2.2 SDP Offer
  7.2.3 SDP Answer
 7.3 媒體建連
  7.3.1 STUN
  7.3.2 TURN
  7.3.3 ICE
  7.3.4 DTLS
 7.4 發(fā)布訂閱
  7.4.1 RTP
  7.4.2 RTCP
  7.4.3 SCTP
第8章  傳輸控制優(yōu)化
 8.1 擁塞控制
  8.1.1 帶寬探測
  8.1.2 GCC算法
  8.1.3 BBR算法
 8.2 弱網(wǎng)降級
  8.2.1 弱網(wǎng)識別
  8.2.2 分級策略
  8.2.3 性能降級
 8.3 抖動緩存與平滑發(fā)送
  8.3.1 NetEQ
  8.3.2 Pacer
 8.4 錯誤恢復
  8.4.1 超時重傳
  8.4.2 前向糾錯
第9章  可擴展架構
 9.1 應用概覽
  9.1.1 實時通話
  9.1.2 會議與教育
  9.1.3 游戲語音與虛擬現(xiàn)實
 9.2 流水線
  9.2.1 Node
  9.2.2 典型流水線
 9.3 服務端架構
  9.3.1 媒體服務器
  9.3.2 高可用網(wǎng)絡
  9.3.3 全球化部署
 9.4 網(wǎng)絡設備
第10章  評價指標
 10.1 總體指標
  10.1.1 成功類指標
  10.1.2 延遲類指標
  10.1.3 卡頓類指標
  10.1.4 指標拆解與歸因
 10.2 視頻質量評估
  10.2.1 客觀評測
  10.2.2 主觀評測
 10.3 音頻質量評估
  10.3.1 客觀評測
  10.3.2 主觀評測
 10.4 網(wǎng)絡質量評估
  10.4.1 弱網(wǎng)測試標準
  10.4.2 弱網(wǎng)測試工具
 10.5 性能與穩(wěn)定性
  10.5.1 性能指標
  10.5.2 穩(wěn)定性指標
附錄 A  習題答案
附錄 B  COM編程基礎
附錄 C  構建工具CMake
附錄 D  調試技巧
附錄 E  編程環(huán)境
附錄 F  JNI基礎
附錄 G  RTC術語
附錄 H  WTL簡介
附錄 I 索引