Android 音频开发(一) 基础入门篇

今天主要讲解下Android音频开发的入门知识,希望对想入门却不知如何下手的朋友有所帮助,同时希望能得到高手的指点和帮助。

深入细化基础技能知识点

大致细化如下10个知识点。

  1. 音频开发的主要应用有哪些(应用场景有哪些)?
  2. 音频开发的具体内容有哪些?
  3. 开发音频应用的难点有哪些?
  4. 音频开发必备基础概念有哪些?
  5. 常见的音频编码方式有几种?
  6. 常见的音频压缩格式有几种?
  7. Adndroid VoIP相关的开源应用有哪些 ?
  8. 常见的音频算法处理的开源库有哪些 ?
  9. Android提供了哪些音频开发相关的API?
    10.音频开发的延时标准是什么?

1:音频开发的主要应用(应用场景)

比如常见的音频播放器,录音机,语音电话,音视频监控应用,音视频直播应用,音频编辑/处理软件,蓝牙耳机/音箱。。。。。。

2: 音频开发的具体内容

  1. 音频采集/播放
  2. 音频算法处理(去噪、静音检测、回声消除、音效处理、功放/增强、混音/分离,等等)
  3. 音频的编解码和格式转换
  4. 音频传输协议的开发(SIP,A2DP、AVRCP,等等)

3: 开发音频应用的难点

延时敏感、卡顿敏感、噪声抑制(Denoise)、回声消除(AEC)、静音检测(VAD)、混音算法,高低音分离。。。。。。

4: 音频开发必备基础概念

在音频开发中,下面的这几个概念经常会遇到。

  1. 采样率(samplerate)

    采样就是把模拟信号数字化的过程,不仅仅是音频需要采样,所有的模拟信号都需要通过采样转换 成可以用0101来表示的数字信号,示意图如下所示:

    蓝色代表模拟音频信号,红色的点代表采样得到的量化数值。采样频率越高,红色的间隔就越密集,记录这一段音频信号所用的数据量就越大,同时音频质量也就越高。根据奈奎斯特理论,采样频率只要不低于音频信号最高频率的两倍,就可以无损失地还原成为原始的声音。

温馨提示:

通常人耳能听到频率范围大约在20Hz~20kHz之间的声音,为了保证声音不失真,采样频率应在40kHz以上。常用的音频采样频率有:8kHz、11.025kHz、22.05kHz、16kHz、37.8kHz、44.1kHz、48kHz、96kHz、192kHz等。

  1. 量化精度(位宽)

    如上图所示,每一个红色的采样点,都需要用一个数值来表示大小,这个数值的数据类型大小可以是:4bit、8bit、16bit、32bit等等,位数越多,表示得就越精细,声音质量自然就越好,当然,数据量也会成倍增大。常见的位宽是:8bit 或者 16bit。

  2. 声道数(channels)

    由于音频的采集和播放是可以叠加的,因此,可以同时从多个音频源采集声音,并分别输出到不同的扬声器,故声道数一般表示声音录制时的音源数量或回放时相应的扬声器数量。比如我们通常说的单声道(Mono)和双声道(Stereo),前者的声道数为1,后者为2

  3. 音频帧(frame)

    音频跟视频很不一样,视频每一帧就是一张图像,而从上面的正玄波可以看出,音频数据是流式的,本身没有明确的一帧帧的概念,在实际的应用中,为了音频算法处理/传输的方便,一般约定俗成取2.5ms~60ms为单位的数据量为一帧音频。

    这个时间被称之为“采样时间”,其长度没有特别的标准,它是根据编码×××和具体应用的需求来决定的,我们可以计算一下一帧音频帧的大小:假设某通道的音频信号是采样率为8kHz,位宽为16bit,20ms一帧,双通道,则一帧音频数据的大小为: int size = 8000 x 16bit x 0.02s x 2 = 5120 bit = 640 byte

5: 常见的音频编码方式

我们知道,模拟的音频信号转换为数字信号需要经过采样和量化,量化的过程被称之为编码,根据不同的量化策略,产生了许多不同的编码方式,常见的编码方式有:PCM 和 ADPCM,这些数据代表着无损的原始数字音频信号,添加一些文件头信息,就可以存储为WAV文件了,它是一种由微软和IBM联合开发的用于音频数字存储的标准,可以很容易地被解析和播放。

我们在音频开发过程中,会经常涉及到WAV文件的读写,以验证采集、传输、接收的音频数据的正确性。

6: 常见的音频压缩格式

在讲音频的压缩格式前,先简单讲一下音频的压缩原理,原理很简单,和视频的压缩原理差不错,就是因为存在冗余信息,所以可以压缩,减少音频的体积。

  1. 频谱掩蔽效应: 人耳所能察觉的声音信号的频率范围为20Hz~20KHz,在这个频率范围以外的音频信号属于冗余信号。

  2. 时域掩蔽效应: 当强音信号和弱音信号同时出现时,弱信号会听不到,因此,弱音信号也属于冗余信号。

而常见的音频压缩格式如下:

MP3,AAC,OGG,WMA,Opus,FLAC,APE,m4a,AMR,等等

7: Adndroid VoIP相关的开源应用

imsdroid,sipdroid,csipsimple,linphone,WebRTC 等等

8: 常见的音频算法处理的开源库

视频开发也有常用的开源库,比如常用的FFmpeg,Android本身自带的medicodec等,当然,音频也有开源的算法处理库,比如:speex、ffmpeg,webrtc audio module(NS、VAD、AECM、AGC)等等

9: Android提供了哪些音频开发相关的API

  1. 音频采集: MediaRecoder,AudioRecord
  2. 音频播放: SoundPool,MediaPlayer,AudioTrack
  3. 音频编解码: MediaCodec
  4. NDK API: OpenSL ES

10: 音频开发的延时标准

ITU-TG.114规定,对于高质量语音可接受的时延是300ms。一般来说,如果时延在300~400ms,通话的交互性比较差,但还可以接受。时延大于400ms时,则交互通信非常困难。

总结

音频开发的知识点还是很多的,学习音频开发需要大家有足够的耐心,一步一个脚印的积累,只有这样才能把音频开发学好。下面推荐几个比较好的博主,希望对大家有所帮助。

  1. csdn博主:《雷神雷霄骅》
  2. 51CTO博客:《Jhuster的专栏》

来源:https://www.icode9.com/content-4-872601.html

(0)

相关推荐

  • Apple music3.6.0 Beta安卓版测试无损音乐

    此前有消息称苹果正准备推出无损音频服务计划,Apple Music将提供HIFI品质的音乐,有媒体在iOS 14.6测试版的代码中找到了相关信息. 根据9to5Google消息,苹果也将把无损音频功能 ...

  • 如何在支付宝买基金,基础入门篇,业绩排行,单位净值,收益率

    今天早上发了一篇关于基金的文章,没想到阅读量竟然破万了,9个小时竟然1.2万次阅读,整的我有点受宠若惊. 有些小伙伴在私信里和我说,自己对基金一窍不通,支付宝基金是怎么具体操作的. 于是就有了这篇文章 ...

  • 打板技术进阶之分时图透析主力筹码结构基础入门篇(图解)

    一.红吸绿散 新手学习筹码不知道从哪里入手,其实有更简便的方式,在分时图上红色的量柱就是吸筹,绿色的量柱就是散筹.一句话就可以入门.   分时图上的量柱是一分钟所有成交量的汇总,而分时图上量柱的颜色是 ...

  • K线基础知识,零基础入门篇二。必读,收藏版

    写在前边:         1.每日三问,吾日三省吾身.         2.做学习型的投资者,每遇投资,我们不仅要知其然,还要知其所以然.         3.做策略分析型的投资者,不要人云亦云,随 ...

  • 路路讲述价值千万的养意蜂文章零基础入门篇

    各位师傅们,朋友们,兄弟们大家好! 本人工作原因,接触众多零基础的养蜂新手,所以交流内容全都停留在养蜂基础交流的问题: 意蜂养殖是养殖仔脾的一个过程,或者说养蜂,就是养仔脾:仔脾只要养好了,不用担心工 ...

  • android基础入门教程!一次关于JVM的面试经历,实战篇

    前言 众所周知,Android是一个基于Linux实现的操作系统.但对于Linux内核来说,Android也仅仅只是一个运行在内核之上的应用程序,与其他运行在内核之上的应用程序没有任何区别. 所以An ...

  • A0 字节系广告入门基础概念篇

    A1 信息流广告优化是份什么样的职业? A2 头条信息流广告底层竞价逻辑 A3 头条信息流广告搭建流程介绍 A4 头条信息流账户优化方法论 不问不知道,一问吓一跳! 居然有同学,连最基础的广告入门相关 ...

  • Power Pivot基础入门精选15篇

    前期,将Power Pivot的部分基础文章和数据透视的文章整理在一起,现考虑后期Power Pivot方面的内容会逐渐占更大的比重,因此对Power Pivot基础知识和DAX入门的15篇文章进行重 ...

  • 新整理Power Query入门操作基础20篇

    理解Excel及其Power系列功能.PowerBI的关系什么人适合学Power  BI(Query)?PQ-数据获取1:Excel文件数据源获取(导入)的几种方式PQ-数据获取2:CSV(及文本文件 ...

  • 周易零基础入门教程之一:概念篇a

    周易零基础入门教程之一:概念篇a 2017-06-04 分类:周易算卦 内容提要:本文涉及到的概念:爻,阳爻,阴爻,单卦,卦序,复卦(包括上卦/下卦,外卦/内卦),卦名,八单卦的基本卦象. 学习周易与 ...