音频&视频

　　本篇为本人的学习笔记。

　　在Html5之前，浏览器对于视频和音频的处理并没有一个标准。因此在网页中看到的视频，都是通过第三插件的方式嵌入的，如：QuickTime、RealPlayer、Flash。浏览器自行整合了这些插件，用户意识不到他们的存在。时至今日，flash已停止更新濒临淘汰，许多浏览器已放弃整合这类插件，html5中的video、audio标签已大行其道。

补充资料

容器的概念

　　大多数人会认为视频文件就是 .avi .mp4,但事实上 avi和mp4仅仅是容器的格式，它只决定怎么将视频存储起来，而不关心存储的内容，有点类似于.zip。实际上，不管是音频文件或视频文件，都只是一个容器文件。这点类似于压缩了一组文件的ZIP文件。

　　视频文件（视频容器）包含了音频轨道、视频轨道和其他一些元数据。视频播放的时候，音频轨道和视频轨道是绑定在一起的，元数据包含了视频的封面、标题、子标题、字幕等相关信息。

编解码器

 　　音频和视频编码/解码是一组算法，用来对一段特定音频或视频进行解码和编码，以便音频和视频能够播放。原始的媒体文件体积非常巨大，如果不对其进行编码，那么数据量是非常惊人的，在互联网上传播则要耗费无法忍受的时间；如果不对其进行解码，就无法将编码后的数据重组为原始的媒体数据。

　　H.264：别名 MPEG-4的第十部分,由MPEG研发并于2003年标准化，它的目的支持一切设备，无论是低带宽低cpu，还是高带宽高cpu 或者是两者之间。要做到这一点，H.264标准被分成不同的几种配置。高配置使用了更多特性，这会导致在解码过程中更加消耗CPU，但视频文件本身会更小，视频效果也更好 。各种设备支持配置如下：

　　现在的视频编解码器会使用各种技巧减少从一帧到另一帧过程中传递的信息数量，它们不会存储每一帧的所有信息，而只是存储两帧之间的差异信息。编码器分为有损和无损，无损视频文件一般太大，在网页中没有优势，故本文重点研究有损编解码器。有损编解码器中，信息在编码过程中丢失是无法避免的，反复的对视频编码会导致其画面不均匀。

浏览器对于容器和编解码器支持的情况

点击此处查看浏览器对于容器和编解码器支持的情况

 目前还没有一种编解码和容器的组合能应用于所有的浏览器中

处理视频的流程

1. 制作一个Ogg容器中使用Theora视频和Vorbis音频的版本
2. 制作另外一个版本，使用WebM视频容器（VP8 + Vorbis）
3. 再制作一个版本，使用MP4视频容器，并使用H.264基本配置的视频和ACC低配的音频
4. 链接上面3个文件到同一个video元素，并向后兼容基于Flash的视频播放器

格式转换（使用FFmpeg）

见FFmpeg的使用

音视频的attribute和property

video标签的attribute

• width：视频显示区域的宽度，单位是CSS像素
• height：视频展示区域的高度，单位是CSS像素
• poster：一个海报帧的URL，用于在用户播放或者跳帧之前展示
• src：要嵌到页面的视频的URL
• controls：显示或隐藏用户控制界面
• autoplay：媒体是否自动播放
• loop：媒体是否循环播放
• muted：是否静音
• preload：该属性旨在告诉浏览器作者认为达到最佳的用户体验的方式是什么
  • none — 作者认为用户不需要查看该视频，服务器也想要最小化访问流量，即提示浏览器该视频不需要缓存。　　
  • metadata(默认值) — 尽管作者认为用户不需要查看该视频，不过应抓取元数据（比如：视频时长）。　　
  • auto — 如果需要的话，可以下载整个视频，即使用户并不一定会用它。
  • 空字符串 — 代指 auto 值。　　

audio标签的attribute

• src：要嵌到页面的视频的URL
• controls：显示或隐藏用户控制界面
• autoplay：媒体是否自动播放
• loop：媒体是否循环播放
• muted：是否静音
• preload：同video的preload属性

 音视频相关的js属性(property)

video&audio相关的js属性

• duration：媒体总时间(只读)，使用时需要延迟或配合loadeddata事件一起使用
• currentTime：开始播放到现在所用的时间(可读写)
• muted：是否静音(可读写,相比于volume优先级要高)，使用时需注意，muted和volume属性不是同步的
• volume：0.0-1.0的音量相对值(可读写)。
• paused：媒体是否暂停(只读)
• ended：媒体是否播放完毕(只读)
• error：媒体发生错误的时候，返回错误代码 (只读)
• currentSrc： 以字符串的形式返回媒体地址(只读)，使用时需要延迟或配合loadeddata事件一起使用

video相关的js属性

• poster：视频播放前的预览图片(读写)
• width / height：设置视频的尺寸(读写)
• videoWidth / videoHeight：视频的实际尺寸(只读)，使用时需要延迟或配合loadeddata事件一起使用

音视频标签的函数及事件

js相关函数

• play()：媒体播放
• pause()：媒体暂停
• load()： 重新加载媒体，当video(audio)标签中的source标签的src属性改变时，需要用此函数重新加载才可生效。

js相关事件

video

video退出全屏

• 不同的浏览器有不同的实现方法

// Webkit
element.webkitRequestFullScreen();//进入全屏
document.webkitCancelFullScreen();//退出全屏

// Firefox
element.mozRequestFullScreen();
document.mozCancelFullScreen();
 
// W3C 
element.requestFullscreen();
document.exitFullscreen();

• 一w3c推荐的兼容写法

//进入全屏
function FullScreen() {
    var ele = document.documentElement;
    if (ele .requestFullscreen) {
        ele .requestFullscreen();
    } else if (ele .mozRequestFullScreen) {
        ele .mozRequestFullScreen();
    } else if (ele .webkitRequestFullScreen) {
        ele .webkitRequestFullScreen();
    }
}
//退出全屏
function exitFullscreen() {
    var de = document;
    if (de.exitFullscreen) {
        de.exitFullscreen();
    } else if (de.mozCancelFullScreen) {
        de.mozCancelFullScreen();
    } else if (de.webkitCancelFullScreen) {
        de.webkitCancelFullScreen();
    }
}

audio