多媒体应用技术4音频采集编辑合成语音识别课件
合集下载
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
音频信息采集：
❖方法： ❖windows自带录音机进行采集 ❖Audition软件录制 ❖手机录制
噪音
❖音高和音强变化混乱、听起来不谐和的声音 是由发音体不规则的振动产生的，从物理学的 角度来看：噪声是发声体做无规则振动时发指一段声音中的频率分量的功率 在整个可听范围（0～20KHZ）内都是均匀 的。是一种无规噪声，瞬时值是随机变化 的。具有连续的噪声谱，包含有各种频率 成分的噪声。频率能量的分布是均匀的。
❖3. 语音识别技术的应用 ❖⑴ 教育应用 ❖⑵ 信息处理与电子商务领域的应用 ❖⑶ 消费娱乐产品的应用
❖3. 常见语音识别技术❖ ：的语音识别技术研究项目，名为 “Deep Speech”。据介绍，在噪音较大的背 景下，语音识别技术的正确率高于谷歌 10%。
❖中国科技大学: 科大讯飞公司在语音识别技术 上占有优势地位，该公司已经推出了成熟的 语音输入法等产品。
3.7.2文语转换技术 语音合成系统包括三个主要的组成部分： ❖文本分析模块：让计算机认识文字，和
词语，进而知道怎么发音 ❖韵律生成模块：音节的声调、语气、停
顿、发音长短 ❖声学模块 ：根据要求让计算机发声
声音素材的基本操作实例
❖ 1.降噪处理 ❖ 2.回声效果 ❖ 3.变速变调效果 ❖4. 拨号声效果 ❖5. 混音效果 ❖6. 淡入淡出效果 ❖7. 音频文件的类型转换
❖ 三星语音引擎
3.7 语音合成
3.7.1语音合成的概念 语音合成包含两种可能实现的途径。 ❖ 一种是录音／重放模式，使机器再生一个预先存
入的语音信号，采用数字存储技术。 ❖ 另一种可能是采用数字信号处理的方法。
按照人类语言功能的不同层次，语音合成可分 为三个层次： ❖ 从文字到语音的合成 ❖ 从概念到语音的合成 ❖ 从意向到语音的合成 语音数据的存储形式可分为两大类： ❖ 波形存储 ❖ 参数存储
Midi音乐的合成
❖ MIDI产生的方法：频率调制合成法，波表合成 法
❖ MIDI播放的方法：计算机根据按键音量节奏等 指令合成还原出乐器声音
❖ MIDI音乐的特点：文件小，可编辑性强，处理 语音的能力和效果差。
❖30min MIDI音乐 200k WAV音乐300M
3.6 语音识别技术
❖1. 语音识别的基本原理
噪声的分类和产生
❖粉红噪声的频率分量功率主要分布在中低 频段。在一定的范围内音频数据具有相同 或类似的能量。
噪声的分类和产生
❖褐色噪声的频率分量功率主要集中在低频 段。
❖MIDI乐器数字接口
❖（Musical Instrument Digital Interface） 是一个工业标准的电子通信协定，为电子 乐器等演奏设备（如合成器）定义各种音 符或弹奏码，容许电子乐器、电脑、手机 或其它的舞台演出设备彼此连接，调整和 同步，得以实时交换演奏数据
语音识别系统的实现主要分为三大阶段： ❖连续语言信号的预处理 ❖特征提取 ❖模式匹配
❖2. 语音识别系统的类型 ❖⑴ 按照输入方式可分为三种：孤立字（词）、连接
词以及连接语音的识别。
❖⑵ 按照发音者可分为特定人、限定人和非特定人语 音识别系统三种。
❖⑶ 根据可识别的词汇量多少可分为小词汇量、中等 词汇量、大词汇量以及无限词汇量语音识别系统。
❖方法： ❖windows自带录音机进行采集 ❖Audition软件录制 ❖手机录制
噪音
❖音高和音强变化混乱、听起来不谐和的声音 是由发音体不规则的振动产生的，从物理学的 角度来看：噪声是发声体做无规则振动时发指一段声音中的频率分量的功率 在整个可听范围（0～20KHZ）内都是均匀 的。是一种无规噪声，瞬时值是随机变化 的。具有连续的噪声谱，包含有各种频率 成分的噪声。频率能量的分布是均匀的。
❖3. 语音识别技术的应用 ❖⑴ 教育应用 ❖⑵ 信息处理与电子商务领域的应用 ❖⑶ 消费娱乐产品的应用
❖3. 常见语音识别技术❖ ：的语音识别技术研究项目，名为 “Deep Speech”。据介绍，在噪音较大的背 景下，语音识别技术的正确率高于谷歌 10%。
❖中国科技大学: 科大讯飞公司在语音识别技术 上占有优势地位，该公司已经推出了成熟的 语音输入法等产品。
3.7.2文语转换技术 语音合成系统包括三个主要的组成部分： ❖文本分析模块：让计算机认识文字，和
词语，进而知道怎么发音 ❖韵律生成模块：音节的声调、语气、停
顿、发音长短 ❖声学模块 ：根据要求让计算机发声
声音素材的基本操作实例
❖ 1.降噪处理 ❖ 2.回声效果 ❖ 3.变速变调效果 ❖4. 拨号声效果 ❖5. 混音效果 ❖6. 淡入淡出效果 ❖7. 音频文件的类型转换
❖ 三星语音引擎
3.7 语音合成
3.7.1语音合成的概念 语音合成包含两种可能实现的途径。 ❖ 一种是录音／重放模式，使机器再生一个预先存
入的语音信号，采用数字存储技术。 ❖ 另一种可能是采用数字信号处理的方法。
按照人类语言功能的不同层次，语音合成可分 为三个层次： ❖ 从文字到语音的合成 ❖ 从概念到语音的合成 ❖ 从意向到语音的合成 语音数据的存储形式可分为两大类： ❖ 波形存储 ❖ 参数存储
Midi音乐的合成
❖ MIDI产生的方法：频率调制合成法，波表合成 法
❖ MIDI播放的方法：计算机根据按键音量节奏等 指令合成还原出乐器声音
❖ MIDI音乐的特点：文件小，可编辑性强，处理 语音的能力和效果差。
❖30min MIDI音乐 200k WAV音乐300M
3.6 语音识别技术
❖1. 语音识别的基本原理
噪声的分类和产生
❖粉红噪声的频率分量功率主要分布在中低 频段。在一定的范围内音频数据具有相同 或类似的能量。
噪声的分类和产生
❖褐色噪声的频率分量功率主要集中在低频 段。
❖MIDI乐器数字接口
❖（Musical Instrument Digital Interface） 是一个工业标准的电子通信协定，为电子 乐器等演奏设备（如合成器）定义各种音 符或弹奏码，容许电子乐器、电脑、手机 或其它的舞台演出设备彼此连接，调整和 同步，得以实时交换演奏数据
语音识别系统的实现主要分为三大阶段： ❖连续语言信号的预处理 ❖特征提取 ❖模式匹配
❖2. 语音识别系统的类型 ❖⑴ 按照输入方式可分为三种：孤立字（词）、连接
词以及连接语音的识别。
❖⑵ 按照发音者可分为特定人、限定人和非特定人语 音识别系统三种。
❖⑶ 根据可识别的词汇量多少可分为小词汇量、中等 词汇量、大词汇量以及无限词汇量语音识别系统。