一、音视频基础知识

作者&投稿:法些 (若有异议请与网页底部的电邮联系)
~ 视频编码指的就是通过特定的压缩技术,将某个视频格式文件转换成另一种视频格式的文件的方式。

视频流传输中最重要的编解码标准有国际电联的H.261、H.263、H.264和国际标准化组织运动图像专家组的MPEG系列标准。

MPEG系列:(由ISO[国际标准化组织]下属的MPEG[运动图像开发专家组]开发) 视频编码方面主要是MPEG1(VCD)、MPEG2(DVD)、           MPEG4、MPEG4 AVC(正热门)。音频编码方面主要是MPEG Audio Layer 1/2、MPEG Audio Layer 3(MP3) 、 MPEG-2AAC、 MPEG-4 AAC等。

H.26X系列: (由 ITU[国际电传视讯联盟]主导,侧重网络传输,只有视频编码)  H.261、H.262、H.263、H.263+、H.263++、H.264(与MPEG4  AVC 合作的结晶)

常见的音频编码格式有AAC、MP3、AC3
MP3:是一种音频压缩技术,它被设计用来大幅度地降低音频数据量。将音乐以1:10 甚至1:12的压缩率,压缩成容量较小的文件,而对于大多数的用户来说,重放的音质于最初不压缩的音频相比没有明显下降。 MP3的特点是,利用人耳对高频信号不敏感的特性,将时域波形信号转换成频域信号,并划分成多个频段,对不同的频段使用不同的压缩率,对高频信号使用大压缩率(甚至忽略信号),对低频信号使用小压缩率,保证信号不失真。这样一来就相当于抛弃人耳基本听不到的高频声音,只保留能听到的低频部分,从而将声音用1:10甚至1:12的压缩率压缩。

AAC:一种专门为声音数据设计的文件压缩格式,与MP3不同,它采用了全新的算法进行编码,更加高效,具有更高的”性价比“,在感觉声音在没有明显降低的前提下,可使文件更加小巧。AAC的优点是,相对于MP3,AAC的音质更加文件更小。AAC缺点是,AAC是属于有损压缩格式,与时下流行的APE、FLAC等无损压缩格式相比音质存在本质上的差距。

AC3:有损音频编码格式。被广泛应用与5.1声道。AC3普及程度很高,唱片、电影院。AC3提供的环绕声系统由5个全频域声道和1个超低音声道组成。

MediaPlayer: 播放控制

MediaCodec: 音视频编解码

OMX: 多媒体部分采用的编解码标准

StageFright:它是一个框架,替代之前的OpenCore,主要是做了一个OMX层,仅仅对OpenCore的omx-component部分做了引用。StageFright是在MediaPlayerService这一层加入的,和OpenCore是并列的。StageFright在Android 中是以共享库的形式存在的(libstegefright.so),其中model----NuPlayer/AwesomePlayer可以用来播放音视频。

AudioTrack : 音频播放。

VLC : Video LAN Client,是一款自由、开源的跨平台多媒体播放器及框架。

FFmpeg : 多媒体解决方案,不是多媒体框架,广泛用于音视频开发中。

GStreamer : 一套构建流媒体应用的开源多媒体框架。

是用于测量显示帧数的量度。所谓的测量单位为每秒显示的帧数。每秒显示帧数或者帧率表示图形处理器处理场时每秒能够更新的次数。30fps就是可以接受的,60fps则可以明显提升交互感和逼真感,但超过75fps就不容易察觉有明显的流畅度提升了。如果帧率超过屏幕刷新率,则会浪费图像的处理能力。

刷新率是指屏幕每秒画面被刷新的次数,刷新率分为垂直刷新率和水平刷新率,一般提到的刷新率通常是指垂直刷新率。垂直刷新率表示屏幕上图像每秒重绘多少次,也就是每秒屏幕刷新的次数,以Hz为单位。刷新率越高,图像就越稳定,图像显示就越自然清晰,对眼睛的影响也越小。达到80Hz以上的刷新率就可以完全消除图像闪烁和抖动感。

编码的目的是压缩数据量,采用编码算法压缩冗余数据。(MPEG、H.26X)

把编码后的音视频数据以一定格式封装到一个容器中,封装格式有mkv、avi、ts等。

码率也就是比特率,比特率是单位时间播放连续的媒体(如压缩后的音频或视频)的比特数量。比特率越高,带宽消耗得越多。比特(bit)0或1

                                                    文件大小(b) =  码率(b/s) * 时长(s)

视频质量和码率、编码算法都有关系。

DTS: 即 Decode Time Stamp,主要是用于标示读入内存中比特率在什么时候开始送入解码器中进行解码

PTS: 即Presentation Time Stamp,主要用于度量解码后的视频帧什么时候被显示出来

常见的视频帧有I、P、B帧等

I 帧表示关键帧,可以理解为这一帧画面的完整保留,解码时只需要本帧数据就可以完成(因为包含完整画面)

P 帧表示的是这一帧和之前的一个关键帧(或P帧)的差别,解码时需要用之前缓存的画面叠加上本帧定义的差别生成最终画面。(也就是差别帧,P帧没有完整画面数据,只有与前一帧的画面差别的数据)

B 帧是双向差别帧,也就是B帧记录的是本帧和前后帧的差别,通过前后画面数据与本帧数据的叠加取得最终的画面。B帧压缩率高,但解码时CPU比较吃力。

音频帧的概念没有那么清晰,跟音频编码格式相关,它是各个编码标准自己实现的。

PCM(未经编码的音频数据)来说,它根本就不需要帧的概念,根据采样率和采样精度就可以播放,比如采样率为44.1kHz,采样进度为16位的音频,你可以算出比特率是4410016kb/s,每秒的音频数据是固定的4410016/8字节。

AMR 帧比较简单,它规定每20ms的音频为一帧,每一帧音频都是独立的,有可能采用不同的编码算法以及不同的编码参数。

MP3帧较复杂,包含更多信息,比如采样率、比特率等各种参数。音频数据帧个数由文件大小和帧长决定,每一帧的长度可能不固定,也可能固定,由比特率决定,每一帧又分为帧头和数据实体两部分,帧头记录了MP3的比特率、采样率、版本等信息,每一帧之间相互独立。

表示可以将模拟信号分成多少个等级,量化精度越高,音乐的声压振幅越接近原音乐。量化精度的单位是bit(比特) 。也可以理解为一个采样点用多少比特表示(8/16/24/32bit)。CD-->16bit , DVD-->24bit。

每秒音频采样点个数(8000/44100Hz),采样单位用Hz表示。

声道是指声音在录制或播放时在不同空间位置采集或回放的相互独立的音频信号,所以声道数也就是声音录制时的音源数量或者回放时相应的扬声器数量。单声道、立体声道、4声道、5.1声道、7.1声道等。


【音视频基础】(六):CIE颜色空间二之CIE XYZ及Y的含义
从XYZ的产生,到YUV,以及后面的LUV、LAB,这是一条线下来的,现在不清楚没关系,接下来,我会理清它们之间的关系,并方便读者形成知识网。那之所以引入这几个颜色空间,或者说它们的重要性是啥呢?是因为它们已经是目前成型,并且广泛使用的颜色空间。比如YUV,做视频编码的应该都比较熟悉,它广泛的应用...

【音视频基础】(八):CIE颜色空间四之从CIE xyY到CIE YUV
因为这个系列的最终目标,是视频编码和图像处理,而在视频编码里我们使用的YUV,并不是CIE YUV,注意我们常说的 YUV和CIE YUV并不是一回事 ,下篇会讲他们为啥不是一回事。那为什么又要讲CIE这几个颜色空间呢?因为如果要成为一名专业的音视频开发人员,这些知识必不可少。并且,最重要的,还是在了解...

抖音基础常识爆火的原因是什么?
这类基础常识视频之所以能够爆火,有几个可能的原因:实用性强。这类基础常识视频通常涉及到人们日常生活中经常需要用到的技能或知识点,例如如何坐高铁、如何使用某种软件、如何修理家用电器等等。由于这些知识点对于大多数人来说都非常实用,因此这类视频一旦被人们发现,就容易受到广泛的关注和分享。节奏...

短视频入门知识
至于如何去选择合适的音乐,需要你根据自己当下拍摄和剪辑的素材去选择最合适的'音乐,具体可以参照抖音快手热门视频;当选择好合适的音乐之后,再配上一段有亮点的文案标题,也许你的短视频就会上热门。 短视频入门知识2 确定好此次短视频的内容思路: 1、 坚持视频定位通常,短视频账号都会有明确的账号定位,如美食类、...

抖音入门基础知识2022
抖音入门基础知识2022,随着抖音的广泛的关注度,几乎每个人的手机都有抖音,不少人都在通过抖音来获利,但是一些刚下载抖音的人并不是很了解和熟悉抖音,以下分享抖音入门基础知识2022。 抖音入门基础知识20221 抖音入门基础知识包括完善个人信息、找准内容定位、真实用户操作、视频发布规范、避免违规操作 1、完善个人...

为什么基础常识类的视频在抖音上爆火?
二是信息量大:基础常识涉及的范围很广,内容也比较丰富,一个视频中可能包含多个知识点。这样的视频对于想要一次性获取大量知识的观众来说非常有吸引力。三是教育性强:基础常识的视频通常是以科普的形式呈现的,通过视频的方式将知识传达给观众,而且通常比书籍和文章更易于理解。这些视频不仅能够满足观众...

ffmpeg基础知识
ffmpeg是音视频处理的c库, 音视频在网络传输过程中,由于数据量大,所有需要进行压缩 压缩目的为了去除冗余信息,冗余信息分为: 1、空间冗余:图像相邻像素之间有较强的相关性 2、时间冗余:视频序列的相邻图像之间内容相似 3、 编码冗余:不同像素值出现的概率不同 ​4、 视觉...

一、视频采集基础知识
音视频采集主要依赖视频、音频硬件采集设备。 视频采集图像传感器(CCD或CMOS等),用于图像采集和处理的过程,把图像转换成电信号。 拾音器、麦克风(声音传感器),用于声音采集和处理的过程,把声音转换成电信号。物理采集设备 :USB摄像头 、SOC摄像头 、采集卡 数码变焦 数码变焦是在感光器件...

华为hcip认证考试内容有些什么
WLAN技术:涵盖无线局域网基础、WLAN技术和WLAN规划与优化等内容,考察考生对WLAN技术的掌握和应用能力。2.选修模块:音视频会议技术:包括音视频会议基础、音视频会议系统组网和音视频会议服务配置等内容,考察考生对音视频会议技术的理解和应用能力。云计算基础:涵盖云计算基础知识、云计算平台和云存储技术等...

数字媒体技术专业学什么
数字媒体技术专业主要学习数字媒体技术的基础理论和技能。数字媒体技术是一个涵盖了图像处理、音视频制作、网页设计、动画制作等多个领域的专业。在专业课程中,学生将接触到一系列关于数字媒体技术的基础知识和技术实践。以下是详细的解释:一、基础理论课程 数字媒体技术专业的基础课程主要包括计算机科学、数字...

吴旗县15659487670: ls - 1800L音视频无线收发器的优点有哪些?
尧秀威乐: 其优点是:综合成本低,性能更稳定,省去布线及线缆维护费用;可动态实时传输广播级图像,图像传输清晰度不错,而且完全实时;组网灵活,可扩展性好,即插即用;维护费用低

吴旗县15659487670: 如何选择高质量的视频会议软件 -
尧秀威乐: 视频会议系统主要是从几个方面来选择:1、音视频的清晰度,一场流畅的远程视频沟通会议需要以高品质的音频及视频采集为基础.2、数据及信息协作能力.在企业的远程沟通会议中,图表、文档、视频等多种媒体信息的分享也扮演着重要...

吴旗县15659487670: 做音频,视频编辑需要哪些技能和能力? -
尧秀威乐: 主要是必须学会对各种音频、视频转码、截取、合并软件的正确使用方法,逐步掌握它的技能要点,自然就有了一定的操作能力了啊. 其实,并不需要学会对很多软件的使用方法,首先学会“千千静听”的转换功能、“QQ影音”转码、截取、合并功能的使用,就可以操作了啊. 我就是这样学的呀,那两个软件,都是免费软件,性能也不错,操作也简单,我用了好几年了,都不打算换为别的软件哦.

吴旗县15659487670: 学习数字媒体技术主要侧重哪方面的学习? -
尧秀威乐: 色彩等)2、音视频图像编程、andriod开发,可以用编程来实现某些特效)4、视听语言等.5、C++、java、算法等(想往游戏这个方向走) 个人认为学习软件的使用并不难,难得是你的创意、你的理念,科学技术最终是服务于艺术. 给点分吧、各种音视频软件1、绘画基础(素描、造型、audition等等.3、C语言(一些应用软件有会脚本文件.工具的使用是为了实现你的想法,这正如一句话所说、网络编程、数据结构,最常见的有photoshop、premier、aftereffect、maya和3dmax选其一(动作用maya多些)

吴旗县15659487670: 信息技术在当今社会有哪些应用? -
尧秀威乐:[答案] 2006年,信息产业各部门积极落实《国家中长期科学和技术发展规划纲要(2006—2020年)》提出的重点任务,认真贯彻... 通信与网络、计算机、数字音视频、信息安全等领域涌现出一批具有我国自主知识产权的新技术、新产品和新标准,为国民...

吴旗县15659487670: 直播、互动直播、实时音视频、旁路直播有什么区别 -
尧秀威乐: 直播:(一对多,RTMP/HLS/HTTP-FLV,CDN)直播是一种非常典型的流媒体系统,通常会分为推流端(Pusher)、拉流端(或者叫播放端,Player)以及直播流媒体中心(直播源站),通常会使用CDN进行直播的分发,因此大部分情况下使...

吴旗县15659487670: 新手怎样学BBOX? -
尧秀威乐: beatbox.uu1001.cn 许多新手很想学B-BOX,但又不知从何学起,这篇教程是写给刚接触~热爱BBOX的朋友..., 首先要了解BBOX这种文化,这里先看两篇帖子: 1:B-BOX介绍 2:BeatBox的学习之路--用嘴巴做节奏! (中文翻译版) 大概了解...

吴旗县15659487670: 各种视频文件格式 特点是什么 -
尧秀威乐: 视频文件格式有不同的分类,如: 微软视频 :wmv、asf、asx Real Player :rm、 rmvb MPEG视频 :mpg、mpeg、mpe 手机视频 :3gp Apple视频 :mov Sony视频 :mp4、m4v 其他常见视频:avi、dat、mkv、flv、vob 编辑本段 常见...

吴旗县15659487670: 简称的avs什么意思 -
尧秀威乐: AVS(Audio Video coding Standard)标准是《信息技术 先进音视频编码》系列标准的简称,是我国具备自主知识产权的第二代信源编码标准,也是数字音视频产业的共性基础标准.[1] 顾名思义,“信源”是信息的“源头”,信源编码技术解决的重点问题是数字音视频海量数据(即初始数据、信源)的编码压缩问题,故也称数字音视频编解码技术.显而易见,它是其后数字信息传输、存储、播放等环节的前提,因此是数字音视频产业的共性基础标准.

吴旗县15659487670: 什么是AP应用处理器?应用处理器芯片又是什么? -
尧秀威乐: 应用处理器是在低功耗CPU的基础上扩展音视频功能和专用接口的超大规模集成电路.应用处理器芯片就是为应用处理平台研发的一些芯片,这些芯片主要是用于搭载在各种产品形态的板子上, 简称MAP;所以应用处理就是AP多媒体应用处理器(Multimedia Application Processor),然后形成一套解决方案供众多品牌商选择然后使用.炬芯S900

本站内容来自于网友发表,不代表本站立场,仅表示其个人看法,不对其真实性、正确性、有效性作任何的担保
相关事宜请发邮件给我们
© 星空见康网