SAPI_5.1_语音合成_和_语音识别_[C_]

SAPI 5.1 语音合成和语音识别[C#]翻译源:Speech Synthesis & Speech Recognition Using SAPI 5.1 By Brian Long (/)翻译说明:并不全文翻译,只翻译些对本人有用的部分,原版代码为Delphi,译文用C# .NET Framework 2.0实现,有些有关Delphi的解释略去,另添加一些C#使用SAPI的个人理解注释,不定期更新[1]语音合成在简单层面上实现语音合成,只需要创建SpVoiceClass对象并调用其中的Speak方法,最简单的实现如下[读出文本框中的文字]private void button1_Click(object sender, EventArgs e){SpVoiceClass svc = new SpVoiceClass();svc.Speak(textBox1.Text,SpeechVoiceSpeakFlags.SVSFDefault);}...[Tachikoma注:此处并未提到编程时添加对SAPI的引用,对COM组件的引用较简单,请自行处理]对Speak方法的参数作如下说明:0]对Speak方法的调用默认情况下将会是同步的,也就是说在朗读完指定文字之前不会返回值[同步/异步状态可用第二参数调整]0]Speak方法返回一个流标号,当存在多个异步声音流时可通过标号识别,标号可作为参数提供给某些函数1]第一个参数为要阅读的文字2]第二参数为可调节的一些参数[Flags],可用"或"运算符将其连接同时使用# SVSFDefault [该方法将同步阅读][具体见说明0]]# SVSFlagAsync [该方法将异步阅读,调用后将立即返回,可通过事件监视朗读结束时间,或调用WaitUntilDone 方法,或通过SpeakCompleteEvent 得到一个事件句柄并提供给WaitForSingleObject]# SVSFPurgeBeforeSpeak 所有朗读中的和待朗读的字符都将被取消# SVSFNLPSpeakPunc 标点将被阅读出来# SVSFIsFilename 标明第一个参数为要朗读文本所在的文件名# SVSFIsXML 标明文本中含有XML标签,用于控制朗读的音量\频率等参数,示例<EMPH>Hello</EMPH><PRON SYM="d eh l f y">Delphi</PRON> developers!<VOLUME LEVEL="70">I can speak <PITCH MIDDLE="+10">high</PITCH> and <PITCHMIDDLE="-10">low</PITCH>.I can speak <RATE SPEED="+10">very quickly</RATE> and <RATESPEED="-10">very slowly</RATE>.I can speak <VOLUME LEVEL="40">quietly</VOLUME> and <VOLUMELEVEL="100">loudly</VOLUME>.</VOLUME>Go to source web page: SAPI 5.1 语音合成和语音识别[C#][1] - Tachikoma的乱七八糟- 博客园列举语音[Voices]翻译说明:由于这个部分涉及到了Delphi编写的简单程序，将其换成C#实现，有些不必要的说明不按照原文翻译，基本上是按照原文复述本节目标：调整朗读语音，调整语音频率和音量代码环境设定：两个TrackBar代表语音频率和音量，trackBarRate，trackBarVolume，一个ComboBox选择朗读语音，comboBoxLanguagePS：朗读语音，可能会不明白朗读语音的意思，就是在控制面板-语音-文字语音转换-"语音选择"中的项，比如Microsoft Mary,Microsoft Sam等等SpVoiceClass类中GetVoices函数原型如下public virtual ISpeechObjectTokens GetVoices(string RequiredAttributes, string OptionalAttributes);该函数返回一个ISpeechObjectToken集合ISpeechObjectTokens，ISpeechObjectToken描述了每个朗读语音函数两个参数均为对所得到集合的限制，第二参数为对第一参数的补充，比如使用GetVoices('Gender = male', '')就会得到男声集合对于这些参数，一般有如下参数：Name,Vendor,Age,Gender,Language[有没有更多的不知道，翻过SAPI的帮助也没找到相关说明]调用以下语句作以说明ISpeechObjectToken sot = svc.GetVoices(String.Empty, String.Empty).Item(0);System.Diagnostics.Trace.WriteLine(sot.GetAttribute("Nam e"));System.Diagnostics.Trace.WriteLine(sot.GetAttribute("Vendor"));System.Diagnostics.Trace.WriteLine(sot.GetAttribute("Age "));System.Diagnostics.Trace.WriteLine(sot.GetAttribute("Gen der"));System.Diagnostics.Trace.WriteLine(sot.GetAttribute("Lan guage"));输出中会显示Microsoft MaryMicrosoftAdultFemale409;9其中409;9代表该语音支持409[英语]和9[...]语言[这里原文提到了申请ISpeechObjectToken实例的垃圾处理的问题，由于C#的垃圾处理机制，不翻译了]必要函数介绍完了，下面是完成目标的代码，很简单，一些没说到的写在了注释里SpVoiceClass svc = new SpVoiceClass();private void button1_Click(object sender, EventArgs e) {svc.Volume = trackBarVolume.Value;svc.Rate = trackBarRate.Value;svc.Voice = svc.GetVoices(string.Empty,string.Empty).Item(comboBoxLanguage.SelectedIndex);svc.Speak(textBox1.Text,SpeechVoiceSpeakFlags.SVSFDefault);}private void Form1_Shown(object sender, EventArgs e){trackBarRate.Minimum = -10;trackBarRate.Maximum = 10;trackBarRate.Value = svc.Rate;//Rate取值 -10 10trackBarVolume.Maximum = 100;trackBarVolume.Value = svc.Volume;//Volume取值 0100ISpeechObjectTokens sots = svc.GetVoices(String.Empty,String.Empty);int i = 0;foreach (ISpeechObjectToken sot in sots){String str = sot.GetDescription(0);//得到语音名称|相当于sot.GetAttribute("name")comboBoxLanguage.Items.Add(str);if (str == svc.Voice.GetDescription(0)) comboBoxLanguage.SelectedIndex = i;i++;}}Go to source web page: SAPI 5.1 语音合成和语音识别[C#][2] - Tachikoma的乱七八糟- 博客园翻译说明：这篇译原文五个部分Making Your Computer Talk，Voice Events，Animating Speech，Keeping Track Of Spoken Text，Speaking Dialogs只是说翻译范围覆盖这五个部分的范围，其中有一些例子不重写了，因为我暂时用不上，有一些乱七八糟的话不译，怕出错，毕竟对其理解不是很深，只挑一些重要的进行复述Making Your Computer Talk 部分提及了如何让朗读暂停和进行，只提取其中用到的几个函数，基本上原型一些出来就知道怎么回事，不详细翻译了类SpVoiceClasspublic virtual void Pause(); //暂停函数public virtual void Resume();//恢复函数public virtual int Skip(string Type, int NumItems);//跳过朗读函数基本一看名称就知道了，只对Skip的参数做一个说明，Type参数代表要跳过的Item的类型[如sentence 按句子跳过...]，但注意这个参数目前只能是"Sentence",后面的NumItems 是指要跳过多少个句子Voice Events 事件部分事件的使用和正常的使用没什么大的区别，唯一需要注意的是类SpVoiceClasspublic virtual SpeechVoiceEvents EventInterests { get; set; }这个属性，运行原理如下：朗读开始后，类会检测EventInterests属性里所有事件，并触发事件，没有包括在内的事件不会触发SpeechVoiceEvents枚举变量如下Enum SpeechVoiceEventsSVEStartInputStream = 2SVEEndInputStream = 4SVEVoiceChange = 8SVEBookmark = 16SVEWordBoundary = 32SVEPhoneme = 64SVESentenceBoundary = 128SVEViseme = 256SVEAudioLevel = 512SVEPrivate = 32768SVEAllEvents = 33790End Enum多个枚举变量用或运算符连接，变量代表的事件具体说明见SAPI的帮助Animating Speech 动画语音OnViseme事件由每个"可识别位置"引发["可识别位置"指朗读一段时发音嘴型需要明显改变的位置]，英语朗读里一共有22个"可识别位置"[根据迪斯尼定义的13个可识别位置(早期动画用13个图片代表嘴唇动作)]可以用相应的嘴形图片形成简单的发音动画[具体例子不重做了，需要的请见原文]Keeping Track Of Spoken Text 跟踪朗读文字[原文通过事件OnWord & OnSentence 简单实现了高亮显示正在阅读的文字][简单不翻译了...懒...]Speaking Dialogs 朗读对话框[原文穷举了一个Form的Label 和Button 属性，朗读出所有的Text，简单不翻译]到此，原文Speech Synthesis 语音合成部分结束译后，才发现没译出什么，主要是比较简单，原文实现了一些例子，将其中重要的TIPs提取出来，主要是实现并不难，对本人没有参考价值[明天在此处放一个实现的简单例子]下一部分语音识别比较难理解，也需要点时间好好翻译，^^Go to source web page: SAPI 5.1 语音合成和语音识别[C#][3] - Tachikoma的乱七八糟- 博客园翻译说明：语音识别中重点翻译"命令识别"[Command recognition]，对本人比较有用...语音识别语音识别可以使用两种识别器:a shared recogniser(TSpSharedRecognizer) [共享识别器]和an in-process recogniser (TSpInprocRecognizer)[独占识别器]，独占识别器效率更高但是独占麦克风，其他程序不能接收到语音输入，相对的，共享识别器可以和其它程序共享使用，其他程序可以接收到语音输入，因此使用共享识别器更多识别器使用一个继承了TSpInprocRecoContext或TSpSharedRecoContext接口的上下文环境，这一上下文环境允许控制开始/停止识别，设置语法，接受事件等语法语法规定了可识别的词，定义了识别规则等，使用XML来描述语法，一个简单的例子如下<GRAMMAR LANGID="809"><DEFINE><ID NAME="RID_start" VAL="1"/></DEFINE><RULE NAME="start" ID="RID_start" TOPLEVEL="ACTIVE"><P>colour</P><RULEREF NAME="colour" /><O>please</O></RULE><RULE NAME="colour"><L><P>red</P><P>blue</P><P>green</P></L></RULE></GRAMMAR>在这个例子中，下面的内容可以被识别colour redcolour red pleasecolour bluecolour blue pleasecolour greencolour green please更多关于此的内容见SAPI的帮助[待续,该熄灯了...][继续]连续识别这个功能很便于使用，我们需要放置一个为共享识别器设置上下文环境SpSharedRecoContextNote:识别器可自动被创建，不必手动创建，如果需要直接使用识别器，可以手动创建SpSharedRecognizerClass或SpInprocRecognizerClass对象下面是个简单的例子private void button1_Click(object sender,EventArgs e){ssrc = new SpSharedRecoContext();srg =ssrc.CreateGrammar(0);srg.DictationSetState(SpeechRuleState.SGDSActive);}[尊重原文，原文这里给出了这个例子，个人认为没什么用...,比较有用的还是后面C & C的例子]语法事件[这一节以复述为主，翻译实在是有点罗嗦，个人认为说明的不是特别清楚]主要提到两个事件OnRecognition和OnHypothesisOnRecognition ，顾名思义，在识别出一个元素后激发OnHypothesis，原文的意思不是很好理解，这里引用微软帮助上的说明A hypothesis is an interim recognition result.Each time the engine attempts a recognition itgenerates an interim results and Hypothesis events are sent out意思就是"假设"是识别的一个中间结果，每次识别时，系统产生一个中间结果集并激发这一事件第二个时间具体的例子不举了，一般用不上，原文有个例子，只是把中间结果集输出，可以用于理解一下工作原理Engine Dialogs主要是原文例子的一个设计，这里没有做这个例子，所以...略Command and Control Recognition命令识别这节没什么好说的，举个例子就可以了，不举原文的例子，写了个识别中文的例子，如要调试此例，请看完文后的"乱七八糟"定义XML命令配置文件XMLRules.xml<GRAMMAR LANGID="804"><!--此为语音号,中文为804--><!-- Rule definitions --><RULE NAME="start" TOPLEVEL="ACTIVE"><O>颜色</O><RULEREF NAME="colour" PROPNAME="chosencolour"/></RULE><RULE NAME="colour"><L PROPNAME="colourvalue"><P VAL="1">红色</P><P VAL="2">黄色</P><P VAL="3">绿色</P></L></RULE></GRAMMAR>private SpeechLib.SpSharedRecoContext ssrc;private ISpeechRecoGrammar srg;private void button1_Click(object sender, EventArgs e){ssrc = new SpSharedRecoContext();srg =ssrc.CreateGrammar(0);srg.CmdLoadFromFile("g:\\XMLRules.xml",SpeechLoadOption.SLODynamic);//读入规则ssrc.EventInterests = SpeechRecoEvents.SREAllEvents;//在"语音事件"中有说明ssrc.Recognition += new_ISpeechRecoContextEvents_RecognitionEventHandler(ssrc_Recognition);//添加识别事件 srg.CmdSetRuleState(srg.Rules.Item(0).Name, SpeechRuleState.SGDSInactive);//激活规则}void ssrc_Recognition(int StreamNumber, object StreamPosition, SpeechRecognitionType RecognitionType, ISpeechRecoResult Result){MessageBox.Show(Result.PhraseInfo.Elements.Item(0).DisplayText);}最后的乱七八糟译了个不像样子，总想按自己的理解写，毕竟英语译过来不像中国话最后几点注意事项，要是没看调试程序出错只能怪自己了1]一定要进行语音训练，控制面板-语音-语音识别-训练配置文件2]如最后一例，使用了中文识别，会调试出错，因为没指定中文识别器指定方法：控制面板-语音-语音识别-语言-Microsoft Simplified Chinese Recognizer 希望能有人看这些文章...Go to source web page: SAPI 5.1 语音合成和语音识别[C#][4] - Tachikoma的乱七八糟- 博客园。