大数据接口技术比较

系统接口规范以及常见的接口技术概述

一、基本要求：

为了保证系统的完整性和健壮性，系统接口应满足下列基本要求：

1.接口应实现对外部系统的接入提供企业级的支持，在系统的高并发和大容量

的基础上提供安全可靠的接入；

2.提供完善的信息安全机制，以实现对信息的全面保护，保证系统的正常运行，

应防止大量访问，以及大量占用资源的情况发生，保证系统的健壮性；

3.提供有效的系统的可监控机制，使得接口的运行情况可监控，便于及时发现

错误及排除故障；

4.保证在充分利用系统资源的前提下，实现系统平滑的移植和扩展，同时在系

统并发增加时提供系统资源的动态扩展，以保证系统的稳定性；

5.在进行扩容、新业务扩展时，应能提供快速、方便和准确的实现方式。

二、接口通讯方式：

接口基本采用了同步请求/应答方式、异步请求/应答方式、会话方式、广播通知方式、事件订阅方式、可靠消息传输方式、文件传输等通讯方式：

1.同步请求/应答方式：客户端向服务器端发送服务请求，客户端阻塞等待服

务器端返回处理结果；

2.异步请求/应答方式：客户端向服务器端发送服务请求，与同步方式不同的

是，在此方式下，服务器端处理请求时，客户端继续运行；当服务器端处理结束时返回处理结果；

3.会话方式：客户端与服务器端建立连接后，可以多次发送或接收数据，同时

存储信息的上下文关系；

4.广播通知方式：由服务器端主动向客户端以单个或批量方式发出未经客户端

请求的广播或通知消息，客户端可在适当的时候检查是否收到消息并定义收到消息后所采取的动作；

5.事件订阅方式：客户端可事先向服务器端订阅自定义的事件，当这些事件发

生时，服务器端通知客户端事件发生，客户端可采取相应处理。事件订阅方式使客户端拥有了个性化的事件触发功能，极大方便了客户端及时响应所订阅的事件；

6.文件传输：客户端和服务器端通过文件的方式来传输消息，并采取相应处理；

7.可靠消息传输：在接口通讯中，基于消息的传输处理方式，除了可采用以上

几种通讯方式外，还可采用可靠消息传输方式，即通过存储队列方式，客户端和服务器端来传输消息，采取相应处理。

三、接口安全要求：

为了保证系统的安全运行，各种接口方式都应该保证其接入的安全性。

接口的安全是系统安全的一个重要组成部分。保证接口的自身安全，通过接口实现技术上的安全控制，做到对安全事件的“可知、可控、可预测”，是实现系统安全的一个重要基础。

根据接口连接特点与业务特色，制定专门的安全技术实施策略，保证接口的数据传输和数据处理的安全性。

系统应在接入点的网络边界实施接口安全控制。

接口的安全控制在逻辑上包括：安全评估、访问控制、入侵检测、口令认证、安全审计、防恶意代码、加密等内容。

四、传输控制要求：

传输控制利用高速数据通道技术实现把前端的大数据量并发请求分发到后端，从而保证应用系统在大量客户端同时请求服务时，能够保持快速、稳定的工作状态。

系统应采用传输控制手段降低接口网络负担，提高接口吞吐能力，保证系统的整体处理能力。具体手段包括负载均衡、伸缩性与动态配置管理、网络调度等功能：

1、负载均衡：为了确保接口服务吞吐量最大，接口应自动地在系统中完成动态

负载均衡调度；

2、伸缩性与动态配置管理：由系统自动伸缩管理方式或动态配置管理方式实现

队列管理、存取资源管理，以及接口应用的恢复处理等；

3、网络调度：在双方接口之间设置多个网络通道，实现接口的多数据通道和容

错性，保证当有一网络通道通讯失败时，进行自动的切换，实现接口连接的自动恢复。

五、接口技术：

5.1 J2EE/EJB

5.1.1. 技术描述

Enterprise JavaBean (EJB) 是可重用的、可移植的 J2EE 组件。EJB 包括三种主要类型：会话 bean、实体 bean和消息驱动的bean。会话bean执行独立的、解除耦合的任务，譬如检查客户的信用记录。实体bean是一个复杂的业务实体，它代表数据库中存在的业务对象。消息驱动的bean用于接收异步JMS 消息。

EJB 由封装业务逻辑的方法组成，众多远程和本地客户端可以调用这些方法。另外，EJB 在容器里运行，这样开发人员只要关注bean里面的业务逻辑，不必担心复杂、容易出错的问题，譬如事务支持、安全性和远程对象访问、高速缓存和并发等。在 EJB规范中，这些特性和功能由EJB容器负责实现。

容器和服务提供者实现了EJB的基础构造，这些基础构造处理了EJB的分布式、事务管理、安全性等内容。EJB规范定义了基础构造和Java API的为了适应各种情况的要求，而没有指定具体实现的技术、平台、协议。

EJB的上层的分布式应用程序是基于对象组件模型的，低层的事务服务用了API技术。EJB技术简化了用JAVA语言编写的企业应用系统的开发、配置和执行。

5.1.2. 技术特点

优点：基于规范的平台，不受限于特定的操作系统或硬件平台；基于组件体系结构，简化了复杂组件的开发；提供对事务安全性以及持续性的支持；支持多种中间件技术。

缺点：与特定于某个操作系统或平台的实现技术相比，性能还有待进一步提高，且资源占用量较大。

5.2 Web Service

5.2.1. 技术描述

Web Service是一种自包含、模块化的应用，是基于网络的、分布式的模块化组件，它执行特定的任务，遵守具体的技术规范，这些规范使Web Service 能与其它兼容的组件进行互操作。可以在网络上(一般是Internet)上被描述、发布、定位和调用。

Web Service体系主要由以下三部分组成：传输协议、服务描述和服务发现，由一系列标准组成，主要有：XML（可扩展的标记语言）、SOAP（简单对象访问协议）等。

上图显示了Web Service（中央）、客户端软件应用程序（左侧）及其使用的资源（包括数据库、其它Web Service等）（右侧）之间的关系。Web Service 通过使用标准协议（如 HTTP）交换XML消息来与客户端和各种资源进行通信。在Web Server上部署Web Service后，由Web Server负责将传入的XML消息路由到Web Service。Web Service 将导出 WSDL 文件，以描述其接口，其它开发人员可以使用此文件来编写访问此Web Service的组件。

5.2.2. 技术特点

Web Service使用标准技术，应用程序资源在各网络上均可用。因为Web Service基于HTTP 、XML和SOAP等标准协议，所以即使以不同的语言编写并且在不同的操作系统上运行，它们也可以进行通信。因此，Web Service适用于网