大数据与知识工程实验室

主要研究方向

1. 大数据分析

研究大数据存储管理、处理、分析和可视化技术及其在工程领域中的应用。主要包括针对特定应用问题的海量数据存储、索引、查询；特定数据集的特征提取、高维数据降维、分析、预测技术；海量数据的时间序列挖掘问题。在主流大数据平台（如Hadoop、Spark、Storm 等等）上开发框架、应用系统等。

2. 数据管理与数据集成

研究多源异构数据集成技术，包括模式匹配、数据去重、数据溯源；研究异构数据查询、查询重写等，研究异构系统的关键字查询技术，基于主流开源系统，自主开发数据集成、查询中间件。

3. 数据流与复杂事件处理技术

研究数据流实时处理技术，研究复杂事件实时处理技术，研究特定应用领域的复杂事件实时告警、预测技术等。

4. 机器学习与数据挖掘

研究分类、聚类、个性化推荐、文本主题建模、深度学习等算法及其在工程领域中的应用。

5. 海量知识库构建与推理

研究知识建模与推理、本体构建与管理等技术，研究特定领域的知识管理、语义分析系统及其应用。

BigDKE科学数据可视化平台

BigDKE-SDVP（BDKE Scientific Data Visualization Platform），是一个自主开发的、第一个基于Web的交互式科学数据可视化平台。该系统用于多参数序列科学数据的交互式分析与可视化，目前用于物理海洋、地海洋化学等多个学科数据的可视化。与当前相关主流系统相比，系统实现了基于Web的交互式方式，使用Google Map通过具有标记的点进行原始数据的空间展示，通过快速可靠的栅格化算法对剖面数据进行栅格化处理，使用不同的投影方式，提供对变量数据进行剖面图和大面图展示方式等；并具有如下特点：在面向服务架构（SOA）下，可以用服务的方式，为世界各地的科学数据库平台提供在线调用，如NASA各数据集等；支持大数据计算平台等。

大数据与知识工程实验室是从复旦大学数据库方向发展起来的实验室，实验室主任为杨卫东教授/研究员。他还是复旦大学航空航天数据研究中心主任，复旦大学计算机学院商用飞机数据管理研究中心主任，复旦大学无锡研究院特聘研究员，上海市数据库专业委员会委员，中国计算机学会高级会员，多个领域、多个层面的专家。作为项目负责人，先后承担了国家自然科学基金、上海市重点基础研究项目、上海市科技攻关项目等大量课题。目前，团队成员包括教授、副教授、博士后、博士生、硕士生在内的研究团队20余人。

大数据与知识工程实验室致力于大数据、机器学习与数据挖掘、数据管理与数据集成、海量知识库构建与推理、数据流与复杂事件处理技术、基于知识的需求管理等技术的研究及其在科学与工程领域中的应用。

在科研项目方面，大数据与知识工程实验室主持和参与了国家自然科学基金、国家863、上海市重点基础研究、上海市科技攻关等各类项目多项。在基础研究方面，在CIKM，IJCAI、CVPR、DASFAA、PAKDD等发表了发表大量学术论文，获得多项发明专利，出版专著/译著多部。

大数据与知识工程实验室与美国、新加坡等高校研究人员建立良好的合作关系，经常与国外著名大学互访，邀请国外大学教授来实验室访问、做学术报告。与国内多个企业和研究机构保持良好合作关系。除了大数据与知识工程的基础研究之外，实验室还注重实际应用的研究和实际问题的解决，在大数据研究和应用方面，采用OpenStack、Hadoop、Spark、Storm、Hive、Pig等云计算和大数据平台，在移动计算和应用方面，采用Android、IOS及相关开发工具，在知识库方面采用Jena等等。在多个应用领域，实验室开发的系统均得到成功应用，取得了丰硕的应用成果。

大数据与知识工程实验室具有良好的研究气氛和团队合作精神，形成了传帮带的良好传统。致力于培养具有研究能力、创新能力、开发能力、沟通能力、学术精神、跨领域人才的培养已研究生毕业研究生的主要去向有著名投资银行、互联网企业、国际著名外资、银行、美国前50名高校读博等，例如，摩根斯坦利、ebay、百度、阿里、银行等。