概述语言信息处理自然语言理解PPT课件
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
一种语言,其规则是根据当前流行的用法而不是用明确的 形式规定的。 自然语言是没有经过加工的或人为干预的语言。
人造语言(Ruled language)
一种语言,其规则在使用前已经明确地规定了。
是一种由人为某些特定目的而创造的语言。
语言信息处理\自然语言理解\自然语言处理\人类 语言技术\计算语言学
人用来交际的“语言”和机器可以理解的语言有什么样的关系?
人是如何运用“语言”进行交际的?
人运用“语言”进行交际的“过程”是否可以描述为一个“机械的过 程”?
什么叫做“理解”一种语言?
如何从“内在的交际意图”到“外显的语言表达”?
……
对外经贸大学中文学院.对外汉语
释名
自然语言(Natural Language )
对外经贸大学中文学院.对外汉语
释名
计算语言学(Computational Linguistics)
计算语言学是利用电子数字计算机进行的语言分析。虽 然许多其他类型的语言分析也可以运用计算机,计算分析最 常用于处理基本的语言数据――例如建立语音、词、词元素 的搭配以及统计它们的频率。(《大不列颠百科全书》)
概述
(语言信息处理&&自然语言理解)
2009-2010学年 For 对外汉语方向本科生
昆仑军分区歌舞团长途跋涉来我部慰问演出
这像是方红画的
甲: 听说吴妈打赢了阿Q。 乙: 不错,阿Q确实被吴妈打败了。 甲: 这个结果有些出人意料。 乙: 阿Q是大意失荆州,怪不得别人。
人用来交际的“语言”具有什么样的性质?
Christopher D.Manning,Hinrich Schutze
对外经贸大学中文学院.对外汉语
语言信息处理领域主要学术会议及活动
ACL(Association for Computational Linguistics) — 美国计算语言学会
COLING(International Conference on Computational Linguistics) — 国际计算语言学会议
计算语言学指的是这样一门学科,它通过建立形 式化的数学模型来分析、处理自然语言,并在计算 机上用程序来实现分析和处理的过程,从而达到以 机器来模拟人的全部或者部分语言能力的目的。
人类语言技术(Human Language Technology,HLT)
所有围绕人类语言(而非动物语言或形式语言)所开展
对外经贸大学中文学院.对外汉语
语言信息处理的方向
分析(理解) analyze, understand 生成(表达) generate or produce, express
自然语言处理(Natural Language Processing,NLP)
是计算机科学领域与人工智能领域中的一个重要方向。 它研究能实现人与计算机之间用自然语言进行有效通信的 各种理论和方法。实现人机间自然语言通信意味着要使计 算机既能理解自然语言文本的意义,也能以自然语言文本 来表达给定的意图、思想等。前者称为自然语言理解,后 者称为自然语言生成。
《信息处理用现代汉语分词规范及自动分词方法》 刘源 等,清华大学出版社
《计算语言学概论》 翁富良等 中国社会科学出版社
源自文库
《当代西方语法理论》 俞如珍 上海外语教育出版社
《语言文字应用》,1992年至今各期
对外经贸大学中文学院.对外汉语
《中文信息处理》,傅永和,广东教育出版社 《应用语言学综论》,冯志伟,广东教育出版社 《语料库语言学》,黄昌宁,商务印书馆 《计算语言学探索》,冯志伟,黑龙江教育出版社 《计算语言学基础》,刘颖,清华大学出版社 《计算语言概论》,俞士汶主编,商务印书馆 《语言文字的信息处理》,盛炎 《中文信息处理若干重要问题》,徐波等,科学出版社 Natural Language Understanding, James Allen, Foundations of Statistical Natural Language Processing,
对外经贸大学中文学院.对外汉语
对外经贸大学中文学院.对外汉语
本章内容
语言信息处理的方向 语言信息处理的对象 语言信息处理的学科定位 语言信息处理的目标 语言信息的理解处理所需的知识 自然语言处理的根本问题 语言理解处理系统的评价 自然语言处理的研究方法 自然语言处理的发展历史 自然语言处理系统的总体构成
TREC(Text REtrieval Conference) CNCCL(全国计算语言学联合学术会议)
附件:HLTwebs.html
对外经贸大学中文学院.对外汉语
考试方式
平时成绩(30%) = 课堂作业 + 课下作业 + 出勤 期中考试(20%):课程报告 (研究报告或读书报告) 期末考试(50%):以填空、名词解释、简答和论述为主
的处理技术的研究。
对外经贸大学中文学院.对外汉语
释名
自然语言理解(Natural Language Understanding,NLU)
人工智能的分支学科。研究用电子计算机模拟人的语 言交际过程,使计算机能理解和运用人类社会的自然语言 如汉语、英语等,实现人机之间的自然语言通信,以代替 人的部分脑力劳动,包括查询资料、解答问题、摘录文献、 汇编资料以及一切有关自然语言信息的加工处理。
对外经贸大学中文学院.对外汉语
参考文献
《自然语言的计算机处理》 冯志伟 上海外语教育出版社
《应用语言学》
刘涌泉 湖南教育出版社
《汉语计算语言学》 吴蔚天 罗建林 电子工业出版社
《人工智能原理》
石纯一 清华大学出版社
《现代汉语语法信息详解词典》 俞士汶 清华大学出版社
《自然语言理解》 姚天顺 清华大学出版社
对外经贸大学中文学院.对外汉语
释名
语言信息处理(Language Information Processing,LIP)
是指用计算机对自然语言的音、形、义等信息进行处 理。即对字、词、句、篇章的输入、输出、识别、分析、 理解、生成等的操作与加工。语言信息处理是一门边缘学 科,也是一门交叉学科。它综合了语言学、逻辑学、心理 语言学、计算机科学、哲学、人工智能、数学和统计学的 研究成果,将它们运用于计算机的语言分析和处理。
人造语言(Ruled language)
一种语言,其规则在使用前已经明确地规定了。
是一种由人为某些特定目的而创造的语言。
语言信息处理\自然语言理解\自然语言处理\人类 语言技术\计算语言学
人用来交际的“语言”和机器可以理解的语言有什么样的关系?
人是如何运用“语言”进行交际的?
人运用“语言”进行交际的“过程”是否可以描述为一个“机械的过 程”?
什么叫做“理解”一种语言?
如何从“内在的交际意图”到“外显的语言表达”?
……
对外经贸大学中文学院.对外汉语
释名
自然语言(Natural Language )
对外经贸大学中文学院.对外汉语
释名
计算语言学(Computational Linguistics)
计算语言学是利用电子数字计算机进行的语言分析。虽 然许多其他类型的语言分析也可以运用计算机,计算分析最 常用于处理基本的语言数据――例如建立语音、词、词元素 的搭配以及统计它们的频率。(《大不列颠百科全书》)
概述
(语言信息处理&&自然语言理解)
2009-2010学年 For 对外汉语方向本科生
昆仑军分区歌舞团长途跋涉来我部慰问演出
这像是方红画的
甲: 听说吴妈打赢了阿Q。 乙: 不错,阿Q确实被吴妈打败了。 甲: 这个结果有些出人意料。 乙: 阿Q是大意失荆州,怪不得别人。
人用来交际的“语言”具有什么样的性质?
Christopher D.Manning,Hinrich Schutze
对外经贸大学中文学院.对外汉语
语言信息处理领域主要学术会议及活动
ACL(Association for Computational Linguistics) — 美国计算语言学会
COLING(International Conference on Computational Linguistics) — 国际计算语言学会议
计算语言学指的是这样一门学科,它通过建立形 式化的数学模型来分析、处理自然语言,并在计算 机上用程序来实现分析和处理的过程,从而达到以 机器来模拟人的全部或者部分语言能力的目的。
人类语言技术(Human Language Technology,HLT)
所有围绕人类语言(而非动物语言或形式语言)所开展
对外经贸大学中文学院.对外汉语
语言信息处理的方向
分析(理解) analyze, understand 生成(表达) generate or produce, express
自然语言处理(Natural Language Processing,NLP)
是计算机科学领域与人工智能领域中的一个重要方向。 它研究能实现人与计算机之间用自然语言进行有效通信的 各种理论和方法。实现人机间自然语言通信意味着要使计 算机既能理解自然语言文本的意义,也能以自然语言文本 来表达给定的意图、思想等。前者称为自然语言理解,后 者称为自然语言生成。
《信息处理用现代汉语分词规范及自动分词方法》 刘源 等,清华大学出版社
《计算语言学概论》 翁富良等 中国社会科学出版社
源自文库
《当代西方语法理论》 俞如珍 上海外语教育出版社
《语言文字应用》,1992年至今各期
对外经贸大学中文学院.对外汉语
《中文信息处理》,傅永和,广东教育出版社 《应用语言学综论》,冯志伟,广东教育出版社 《语料库语言学》,黄昌宁,商务印书馆 《计算语言学探索》,冯志伟,黑龙江教育出版社 《计算语言学基础》,刘颖,清华大学出版社 《计算语言概论》,俞士汶主编,商务印书馆 《语言文字的信息处理》,盛炎 《中文信息处理若干重要问题》,徐波等,科学出版社 Natural Language Understanding, James Allen, Foundations of Statistical Natural Language Processing,
对外经贸大学中文学院.对外汉语
对外经贸大学中文学院.对外汉语
本章内容
语言信息处理的方向 语言信息处理的对象 语言信息处理的学科定位 语言信息处理的目标 语言信息的理解处理所需的知识 自然语言处理的根本问题 语言理解处理系统的评价 自然语言处理的研究方法 自然语言处理的发展历史 自然语言处理系统的总体构成
TREC(Text REtrieval Conference) CNCCL(全国计算语言学联合学术会议)
附件:HLTwebs.html
对外经贸大学中文学院.对外汉语
考试方式
平时成绩(30%) = 课堂作业 + 课下作业 + 出勤 期中考试(20%):课程报告 (研究报告或读书报告) 期末考试(50%):以填空、名词解释、简答和论述为主
的处理技术的研究。
对外经贸大学中文学院.对外汉语
释名
自然语言理解(Natural Language Understanding,NLU)
人工智能的分支学科。研究用电子计算机模拟人的语 言交际过程,使计算机能理解和运用人类社会的自然语言 如汉语、英语等,实现人机之间的自然语言通信,以代替 人的部分脑力劳动,包括查询资料、解答问题、摘录文献、 汇编资料以及一切有关自然语言信息的加工处理。
对外经贸大学中文学院.对外汉语
参考文献
《自然语言的计算机处理》 冯志伟 上海外语教育出版社
《应用语言学》
刘涌泉 湖南教育出版社
《汉语计算语言学》 吴蔚天 罗建林 电子工业出版社
《人工智能原理》
石纯一 清华大学出版社
《现代汉语语法信息详解词典》 俞士汶 清华大学出版社
《自然语言理解》 姚天顺 清华大学出版社
对外经贸大学中文学院.对外汉语
释名
语言信息处理(Language Information Processing,LIP)
是指用计算机对自然语言的音、形、义等信息进行处 理。即对字、词、句、篇章的输入、输出、识别、分析、 理解、生成等的操作与加工。语言信息处理是一门边缘学 科,也是一门交叉学科。它综合了语言学、逻辑学、心理 语言学、计算机科学、哲学、人工智能、数学和统计学的 研究成果,将它们运用于计算机的语言分析和处理。