Visual C++音频/视频处理技术及工程实践

第1篇 开发基础. 1

第1章 数字音视频开发技术基础 3

1.1 数字音视频基本概念 4

1.1.1 数字音频技术基础 4

1.1.2 各种数字音频文件格式基础 4

1.1.3 视频的相关基础概念 8

1.1.4 常见的视频文件格式 8

1.2 数字音视频数据的编解码技术 10

1.2.1 音频数据的编解码 11

1.2.2 视频数据的编解码 13

1.2.3 音视频编码的相关标准 13

1.3 音视频处理平台的选择 15

1.3.1 个人多媒体计算机 15

1.3.2 嵌入式处理器arm 16

1.3.3 数字媒体处理器dsp 16

1.4 音视频开发的典型应用 16

1.4.1 个人消费类电子产品 16

1.4.2 公共领域的音视频应用 18

1.5 常用音视频开发工具 21

1.5.1 directsound音频开发 21

.1.5.2 directshow视频开发 21

1.5.3 dsp ccs算法开发 22

1.6 本章小结 23

第2章 visual c++ 2005开发基础 25

2.1 visual c++ 2005新增特性 26

2.1.1 句柄（handles） 26

2.1.2 类型的声明 26

2.1.3 对代码编辑的改进 27

2.2 vc能做的事情 27

2.2.1 生成传统的控制台应用程序 27

2.2.2 生成基于mfc的应用程序 32

2.2.3 生成静态链接库 40

2.2.4 生成动态链接库 41

2.3 利用向导完成基本开发 46

2.3.1 生成应用程序 46

2.3.2 生成应用库lib/dll 53

2.4 mfc编程基础 56

2.4.1 windows消息与事件 56

2.4.2 消息与事件的响应 63

2.4.3 常用消息 66

2.5 基于对话框的编程 68

2.5.1 创建和编辑对话框 68

2.5.2 对话框种类 75

2.6 常用控件使用技巧 79

2.6.1 按钮类控件的使用 80

2.6.2 文本可编辑类控件的使用 81

2.6.3 静态类控件的使用 82

2.6.4 其他控件 83

2.7 visual 2005开发技术资源 84

2.7.1 msdn在线帮助 84

2.7.2 丰富的网络资源 86

2.8 visual 2005开发的常见问题 86

2.8.1 如何使用volatile和const_cast 86

2.8.2 如何构造unicode版本的程序 87

2.8.3 如何使用.def文件 87

2.8.4 如何正确编写win32 dll 87

2.8.5 如何编写和使用资源dll 88

2.8.6 如何实现对话框的数据交换 88

2.9 本章小结 89

第2篇 音频开发 91

第3章 directsound开发基础 93

3.1 microsoft directsound sdk 94

3.1.1 比较directsound与directmusic 94

3.1.2 directsound sdk能做什么 95

3.1.3 如何获取directsound sdk 96

3.1.4 directsound sdk的基本结构 98

3.1.5 directsound sdk安装 100

3.1.6 选择最适合用户的directsound sdk 100

3.1.7 用directsound进行编程的必要步骤 102

3.2 directsound的详细使用方法 103

3.2.1 directsound设备对象 104

3.2.2 directsound缓冲区对象 107

3.2.3 使用wav数据 114

3.2.4 使用音效 116

3.3 开发环境配置 118

3.3.1 visual c++基本开发环境配置 119

3.3.2 directsound应用程序的开发环境配置 119

3.3.3 directsound filter开发环境配置 121

3.4 调试音频处理程序 125

3.4.1 visual c++调试器 125

3.4.2 directsound中常用的调试技术 128

3.5 directsound开发的常见问题 130

3.6 本章小结 131

第4章 打造自己的音频播放器 133

4.1 系统设计和分析 134

4.2 缓冲区和通知基础 135

4.2.1 缓冲区的概念 135

4.2.2 缓冲区的通知 136

4.3 播放文件 137

4.3.1 创建directsound对象 137

4.3.2 创建播放缓冲区 138

4.3.3 调用方法播放声音 145

4.3.4 结束播放 146

4.4 系统效果演示 146

4.4.1 新建基于对话框的程序框架 147

4.4.2 添加控件及变量 147

4.4.3 封装cdirectsound类实现directsound声音播放 148

4.4.4 与对话框界面相关操作实现 156

4.4.5 程序运行结果 159

4.5 directsound开发常见问题 160

4.6 本章小结 161



第5章 语音3d特效器制作 163

5.1 系统设计和分析 164

5.2 directsound 3d缓冲区 164

5.2.1 获取3d缓冲区对象 165

5.2.2 最大距离和最小距离 166

5.2.3 处理模式 167

5.2.4 声音圆锥 167

5.3 directsound 3d虚拟听众 168

5.3.1 获得3d听众 168

5.3.2 听众的空间参数 169

5.3.3 距离因子与doppler效应 171

5.3.4 滚降因子与延迟设置 173

5.4 系统效果演示 174

5.4.1 具体的实现步骤 174

5.4.2 程序的实现代码 176

5.4.3 程序运行结果 186

5.5 directsound 3d开发常见问题 187

5.6 本章小结 188

第6章 对拾音设备录制自己的语音文件 189

6.1 系统分析和设计 190

6.2 管理捕获缓冲区 191

6.2.1 创建捕获缓冲区 191

6.2.2 启动缓冲区 197

6.2.3 封锁缓冲区 197

6.2.4 解锁缓冲区 198

6.2.5 中止捕获 199

6.3 系统效果演示 199

6.3.1 声音类的封装 199

6.3.2 声音管理函数的实现 202

6.3.3 程序运行结果 214

6.4 directsound录制语音文件开发常见问题 215

6.5 本章小结 216

第3篇 视频开发 217

第7章 directshow开发基础 219

7.1 microsoft directshow sdk 220

7.1.1 directx及成员组成 220

7.1.2 directshow sdk能做什么 221

7.1.3 如何获取directshow sdk 221

7.1.4 安装direshow sdk 222

7.2 开发环境配置 224

7.2.1 生成directshow sdk开发库 224

7.2.2 visual c++开发环境配置 229

7.2.3 常见问题解析集锦 232

7.3 directshow sdk基本架构 234

7.3.1 directshow sdk总体架构 234

7.3.2 directshow sdk简单应用程序案例 236

7.3.3 滤波器链表filer graph及各种组件 244

7.3.4 构建滤波器链表（building filer graph） 252

7.3.5 滤波器链表中的数据流动data flow 257

7.3.6 directshow中的事件通知机制 261

7.3.7 常用directshow sdk接口 267

7.4 directshow sdk常用开发案例 267

7.4.1 通用开发流程 268

7.4.2 系统初始化 268

7.4.3 媒体播放方法 268

7.4.4 消息处理方法 270

7.4.5 视频采集技术 271

7.4.6 音频采集案例.. 282

7.5 本章小结 293

第8章 打造自己的媒体播放器 295

8.1 系统分析与设计 296

8.1.1 filtergraph结构设计 297

8.1.2 graphedit模拟实现 297

8.1.3 界面设计 299

8.2 实现媒体控制类 307

8.2.1 cdxgraph类初始化 308

8.2.2 创建graph滤波器链表 309

8.2.3 图像窗口设计 311

8.2.4 媒体播放控制 312

8.2.5 全屏显示及抓图存盘实现 315

8.3 实现一个简单的媒体播放器 317

8.4 升级你的播放器 321

8.4.1 添加控制功能 321

8.4.2 添加拖放功能 325

8.4.3 添加音量调节功能 326

8.4.4 添加欢迎背景图片 328

8.5 系统效果展示 328

8.6 如何播放更多的文件格式 329

8.7 本章小结 330

第9章 自制dv实现视频采集 331

9.1 系统分析与设计 332

9.1.1 采集设备的枚举 332

9.1.2 使用capture graph builder 335

9.1.3 采集参数的设置 336

9.2 使用经典采集技术实现视频捕获 338

9.2.1 graphedit模拟实现 338

9.2.2 视频捕获类ccaptureclass的实现 340

9.2.3 界面设计 345

9.3 使用vmr技术实现视频图像捕获 350

9.3.1 vmr技术基础 350

9.3.2 graphedit模拟实现视频捕获预览 350

9.3.3 视频图像捕获类cvmr_capture的实现 353

9.3.4 界面设计 361

9.4 系统效果演示 366

9.4.1 实例一 系统效果演示 367

9.4.2 实例二 系统效果演示 368

9.5 本章小结 369

第10章 vfw技术实现视频处理通用平台 371

10.1 vfw开发技术流程分析 372

10.1.1 技术概述 372

10.1.2 vfw采集开发流程图 373

10.2 使用vfw实现视频捕获和预览 373

10.2.1 建立单文档应用程序 373

10.2.2 创建视频窗口 375

10.2.3 设计回调函数 376

10.2.4 视频图像显示设置 378

10.2.5 捕获预览视频 379

10.2.6 配置视频格式及图像参数 381

10.3 使用系统插件实现视频编解码 382

10.3.1 使用系统视频编解码插件 383

10.3.2 视频编码码流写avi文件 385

10.3.3 关闭平台 387

10.4 使用xvid codec算法实现视频编解码 388

10.4.1 生成xvid算法静态库（编译过程） 388

10.4.2 实现xvid codec视频编码算法函数 389

10.4.3 实现xvid codec视频解码算法函数 393

10.4.4 使用xvid codec编解码算法 395

10.5 平台应用效果展示 398

10.6 本章小结 399

第4篇 编解码技术 401

第11章 纵览音视频编解码技术 403

11.1 数字音视频基础 404

11.2 音视频编解码及方法 406

11.2.1 音频编码方法 406

11.2.2 视频编码方法 410

11.3 编解码技术标准 417

11.3.1 静态图像编码标准 418

11.3.2 mpeg-4/h.264视频算法 424

11.3.3 avs国产视频编码标准 430

11.4 编解码产业及发展 431

11.4.1 编解码资源一览 431

11.4.2 编解码发展前景 432

11.5 本章小结 433

第12章 使用mmx/sse 2进行多媒体编程 435

12.1 mmx/sse 2技术基础 436

12.2 mmx/sse 2指令剖析 439

12.2.1 mmx媒体扩展指令 439

12.2.2 mmx程序设计 444

12.2.3 sse/sse 2媒体扩展指令 455

12.2.4 sse程序设计详细解析 457

12.3 使用mmx/sse 2进行音视频开发 463

12.3.1 开发前技术准备 464

12.3.2 mmx/sse 2视频编解码编程 465

12.3.3 使用vc调试mmx/sse 2程序 470

12.4 mmx/sse 2开发常见问题 472

12.4.1 制订计划 472

12.4.2 哪部分代码可使用mmx技术改进 473

12.4.3 代码是浮点型还是整型 473

12.4.4 emms准则 474

12.4.5 cpuid的检测mmx技术的用法 474

12.4.6 数据对齐 474

12.4.7 数据安排 475

12.4.8 应用程序最后的调整 476

12.5 本章小结 476

第13章 用dm642实现视频编解码技术 477

13.1 数字媒体处理器tms320dm642dsp概述 478

13.2 dsp软件开发环境ccs 481

13.2.1 安装ccs 481

13.2.2 ccs主要部件 482

13.2.3 使用ccs优化工具实现算法优化 488

13.3 用c语言进行视频算法框架编程 492

13.3.1 c编程规则和参考 492

13.3.2 dsp关键字与cmd文件使用 493

13.3.3 算法系统资源剖析 495

13.4 dm642实现视频算法优化 497

13.4.1 并行算法指令和建立软件流水 497

13.4.2 使用intrinsic指令完成核心模块的优化 499

13.4.3 使用dsp线性汇编优化核心模块 500

13.4.4 使用cache技术实现算法优化 507

13.4.5 使用乒乓式edma实现算法优化 508

13.5 dm642优化视频算法常见问题 513

13.6 本章小结 518

第14章 xvid codec实现mpeg-4编解码 519

14.1 mpeg-4编解码概述 520

14.1.1 基于对象的mpeg-4视频编码 520

14.1.2 xvid格式文件播放 520

14.2 xvid codec编解码分析 521

14.2.1 mpeg-4编解码设计与剖析 521

14.2.2 mmx/sse 2实现xvid codec 549

14.2.3 dm642下xvid codec优化 553

14.3 运行xvid codec系统 559

14.3.1 yuv原始视频数据及其显示 559

14.3.2 vc平台下编译和运行xvid codec 559

14.3.3 codec在dsp下软仿真和硬仿真 562

14.4 系统效果展示 562

14.5 本章小结 563

第15章 x264实现h.264/avc视频编码 565

15.1 h.264/avc编码概要 566

15.1.1 开源代码工程管理软件 566

15.1.2 获取开源算法工程 566

15.1.3 h.264/avc新特性 567

15.2 x264视频编码分析 568

15.2.1 h.264/avc关键技术要点 569

15.2.2 x264视频编码设计与剖析 577

15.2.3 x264核心模块mmx/dsp汇编优化 599

15.3 运行x264编码系统 606

15.3.1 vc平台下编译和运行x264 606

15.3.2 jm验证x264码流 610

15.3.3 ffmpeg中的h.264视频解码 611

15.4 系统效果展示 611

15.4.1 x264实现h.264/avc视频编码 611

15.4.2 ffmpeg-h264-vc工程实现h.264视频解码 612

15.5 本章小结 613

第16章 打造自己的dvr监控系统 615

16.1 dvr监控系统分析与设计 616

16.1.1 监控系统分类 616

16.1.2 监控系统组成 617

16.1.3 基于压缩板卡的sdk软件开发包 619

16.2 dvr监控系统主界面软件设计 621

16.2.1 对话框应用程序开发 621

16.2.2 位图按钮设计 622

16.3 模拟dvr视频采集 636

16.3.1 基于directshow的视频采集回放 636

16.3.2 基于directshow的影音文件回放 638

16.4 系统效果展示 643

16.5 本章小结 644

附录a 旧版vc升级到vc 2005程序安全的10点注意事项 645

附录b 开发常见问题...