企业服务总线ESB方案书.docx
- 文档编号:10545440
- 上传时间:2023-02-21
- 格式:DOCX
- 页数:44
- 大小:80.07KB
企业服务总线ESB方案书.docx
《企业服务总线ESB方案书.docx》由会员分享,可在线阅读,更多相关《企业服务总线ESB方案书.docx(44页珍藏版)》请在冰豆网上搜索。
企业服务总线ESB方案书
企业服务总线ESB方案书
1需求综述
1.1主数据平台接口
1.2业务数据接口
1.30A系统接口:
1.4国家法定信息发布媒体:
2.2部署方案
管理监控部分部署方案
2.2.1
2.2.2
硬件选型建议
10
2.2.3
逻辑分区部署方案
11
2.2.4
硬件配置建议
11
2.2.5
服务接口规范
12
2.2.6
高性能、高可用性及扩展能力设计
12
2.2.7
完善的安全机制
13
2.3整体解决方案
接入控制
2.3.1
2.3.2
通信接入模块
2.3.3
请求系统适配
15
16
17
18
2.4集成服务功能
19
2.4.1
服务治理
19
2.4.2
提供对出错服务的及时检测和隔离功能
20
2.4.3
协议转换
20
2.4.4
消息格式转换
21
2.4.5
服务路由
22
2.4.6
监控和运维
22
2.4.7
服务等级
23
2.5系统非功能需求
24
2.5.1
可用性
24
2.5.2
可扩展性
24
2.5.3
可维护性
25
2系统解决方案
2.1系统技术架构
2.1.1
运行平台
2.1.2
开发平台
2.1.3
监控平台
2.1.4
公共服务
2.1.5
适配器...
1.5
安全性
25
1.6
性能需求
25
2.6公用服务
26
2.1.6
流量控制
26
2.1.7
故障隔离
26
2.1.8
统一流水号
27
2.1.9
日志记录
27
2.7管理监控
27
2.2.8
系统平台级监控
27
2.2.9
应用级监控
27
2.2.10
统计分析
27
异常报警
2.2.11
28
2.2.12
统一的运维管理
28
28
2.3.4
2.3.5
2.3.6
2.4.8
技术支持与售后服务体系
服务管理模式
服务响应
问题优先级(或问题严重程度)级定义
29
29
30
30
2.4.9
服务响应时间
31
2.4.10
问题解决时间
33
2.4.11
服务文档
34
2.3.7维护支持服务流程
服务消息创建流程
2.5.4
2.5.5
问题处理流程
2.5.6
服务确认流程
2.5.7
投诉及问题升级流程
35
35
35
36
37
3技术支持与服务方案
1需求综述
MDM中传
1.7主数据平台接口
系统建立与SAP相同的基础数据管理库,通过数据总线接口同步能源集团
基础数据信息包括:
输过来的编码或数据,以满足电子采购平台基础数据管理的需求
物料编码、计量单位、供应商、客户等。
1.8业务数据接口
系统业务数据通过数据总线接口同SAP、OA、EC等系统进行数据交互
系统必须确保通过数据总线接口访问
SAP、
OA、EC等系统数据与电子采购平台数据
传输及时准确、数据完整统
EC
系
电商平台
1.9OA系统接口:
支持将电子采购平台中的待办事项发送到
OA办公系统进行审批,并读取审批流。
变更公告、结果公
1.10国家法定信息发布媒体:
按照国家相关要求,选择相关媒体建立统一接口,支持招标公告、
示等的自动发布。
如国家无强行规定,可以不做接口。
系统解决方案
2.8
系统技术架构
IB勢麻統2配S
TXeitJif
[灼Maa]I罪養♦两订
«则稣凶ES
诗菽It入应硕序廉口
FS人报芳分剩fca同牙汙牙砖涣運代适配喀工:
谆t先
«5?
紺性1(事W-STINT高吞Itlfch
怯一脑寺ffin砂W—ere檢一益吟常wk泰谕诃
iSiEi^ars建5?
应
1.11
运行平台
运行平台内部按照集成应用的特点分为多个集成“通路”,目前考虑分为四类通路:
关键服务通路关键业务、实时性要求高。
2、非关键通路
非关键业务,查询等。
3、服务代理通路
从目标架构过渡过程中,与集成目标无关的可以采取“穿透”的方式,减少实施工作量和实施成本。
另外,复用价值较低的服务请求也适合采用“代理模式
4、低成本通路
对于实时性要求不高,
且信息量大的服务,可采取批量处理模式,
降低集成实施成本。
实际部署环境中,每一类通路都可以有多个物理部署,用来保证系统的可靠性,同时
也支持横向的扩展和减少不同系统之间的相互影响。
1.12
开发平台
基于ESB系统标准的服务接口定义、
内部统一的元数据管理、数据结构和服务接口定
义、路由规则等,实现多个技术通路的统一配置开发。
开发平台的是对各个技术通路实际实现方法的抽象封装。
提供服务逻辑的开发框架和组件库,用于转换适配逻辑、公共服务逻辑等的标准化开发、组件重用和统一管理。
ESB应用系统要建立统一的日志规范、流水记录规范、错误码规范、系统运行状态检
测规范、系统运行状态控制标准,实现对
ESB系统整体统一的监视和控制。
是
ESB系统的集成“控制面板”。
主要功能包括:
异常监视、通知提醒、运行控制、实时查询、统计分析、服务的配置
和发布、服务管理、统一维护和版本部署等。
由于ESB系统是整个企业的服务访问枢纽,
ESB可以集中监控企业内所有的服务访
问,能够提供各个系统的服务质量和状态的统计数据,
例如:
成功率、服务响应时间、
服务访问量、服务状态异常等。
1.14
公共服务
提供统一的流量控制服务、日志记录、接入参数控制等公共服务。
从而实现多技术平
台、多物理部署运行环境的公共服务支持。
1.15
适配器
适配器是ESB系统解决与外部系统之间各类差异的总称。
ESB将外部系统分为请求系统和服务系统两类。
2.9服务系统适配器
对于服务系统,尤其是遗留服务系统,
基本集成策略是由ESB项目组开发适配器进行
ESB服务接口
流程调用部分,如果由ESB组合这类服务流程组合,
解决相关的交易完整性、
致性
集成。
但是服务系统适配器,并不能解决所有的服务适配问题,例如:
规范与服务系统规范的复杂对应和匹配工作,尤其是涉及到多个服务系统接口的复杂
问题,代价太大而且无法保证。
因此,实际集成实施过程中,不可避免的要涉及到对服务系统的改造工作。
2.1.5.2请求系统适配器
对于请求系统,
ESB的基本原则是要求请求系统符合ESB的技术规范和服务接口规
范。
目的是减少不必要的转换适配层次,提高系统的集成服务效率,降低资源消耗。
ESB系统可为请求系统提供API,对请求系统屏蔽通讯适配、报文组包等技术细节
请求系统只需要理解业务层面的接口规范,从而大大简化请求系统的集成工作,同时还可以加强对请求系统的监控管理,同时为接口技术实现的升级改造提供辅助支持。
ESB也可以开发适配器,实现请求系统的集成。
主要针对那些无法改造或改造成本过高的请求系统。
2.10
管理监控部分部署方案
ESB系统的部署方案必须符合企业基础架构的要求。
区
5*r.er
Web2区和APP区。
1)Webserver禾RApplicationServer必须分离,分别部署在
或者Web2区的应用通过生产区域的APP,访问DB
2)用户管理要符合集团的规范
用户权限控制统一通过
UM
UM决定用户是否有权限操作
ESB的管理监控平台。
UM权限通控制通过以后,由
ESB管理监控应用来进行详细的角色权限管理。
3)考虑到费用问题,可以采用
Apache禾RTomcat。
ESB系统目标架构硬件选型主要考虑从以下因素:
1)成本因素
ESB系统基于Java技术实现,具有跨平台的技术优势,因此可将成本是考虑硬件选
型的首要指标,未来随着ESB应用规模的不断增长,
硬件成本在项目投入所占比重将
会增加,因此选择性价比高的硬件平台是提高效费比的有效途径。
2)硬件扩容周期
ESB作为企业内部信息化最为关键的服务枢纽,必须能够快速响应应用规模的增长,
其中包括硬件的采购周期、系统扩容部署速度。
3)资源调配的简便性、灵活性
ESB系统应能够针对业务量的周期性变化,
灵活的增减系统资源配置,资源的调整不
2)
虚拟化的集中资源管理,可有效提高资源的利用率。
3)
在集群中插入新的刀片,就可以提咼整体性能。
应对集成服务持续性造成影响。
基于上述考虑,ESB系统的硬件推荐采用刀片服务器。
刀片服务器还具有以下优点:
1)
硬件成本相对低廉,配套的系统软件和中间件价格也相对较低。
4)
5)
支持热插拔,硬件资源可以轻松地进行替换,并且将维护时间减少到最小。
节约空间、便于集中管理、易于扩展和提供不间断的服务。
1.18
逻辑分区部署方案
V
\\ehSerer
=Ph—T■---->-Wr
二t_”Corn.d门鳥「er
罕亡仁
逹
「卡忑
V■-
7
1
A
IVi雀
=<*;
1.19
硬件配置建议
其对应分配如下:
名称
功能分布
配置
计算单元数量
适配器公共服务
2cpu(8核)
1*2适配器/公共
32GBmemory
丈服务
集成核心
WebMethods
2cpu(8核)
1*2
MessageBroker
32GBmemory
—服务器
Oracle
2cpu(8核)
1
32GBmemory
归档数据库服务器
Oracle
2cpu(8核)
1
32GBmemory
一■
备份资源池
作为公共备份
2cpu(8核)32GB
memory
1
总计
7
ESB系统负责解决实施服务接口规范与服务系统接口的差异,
可将主要的实施工作控
制在ESB项目范围内,大大降低周边系统的改造工作量,
配合一些系统的瘦身计划的
分阶段顺利实施。
1.21
高性能、高可用性及扩展能力设计
高处理能力保证措施控制信息+XML应用报文,中间层次不必解析XML应用报文,使系统不仅具备完善的
管理控制能力,同时还减少了报文解析开销,提高了效率。
非阻塞的异步模式、流水线式的作业处理,提高吞吐能力。
异步记录流水日志,保证信息的完整记录,同时不影响系统的处理性能。
系统处理能力可随硬件资源的扩展线性的增长。
系统所有配置规则均加载到Cache中,运行过程中不存在对数据库配置信息的读写操
作,保证系统高效运行。
持续稳定运行保障措施所有应用模块均为群集部署,系统不存在单点故障隐患,某个模块的故障不影响正常运行。
15秒钟内完成,无
系统应用版本的升级可按模块分别进行,不影响业务的正常运行。
采用数据库分区技术,实现海量数据记录的清理和分区切换过程需采用与应用相关的数据库分表方式,实现批量数据处理对总线应用透明。
系统提供完备的动态安全刷新手段,配置信息可运行时在线刷新。
可扩展性
每个逻辑
系统可以在CPU、内存等资源增加及扩容的情况下自我线性扩展处理能力;
模块可以采用横向扩展的多物理模块部署。
中
间用队列进行通讯。
可维护性系统具有较为完善的用户管理界面,提供对系统所有功能的维护与参数配置管理的功能;系统采用统一的服务模式和开发框架,从开发商增加可维护性,系统部署上采用
多逻辑单元分离部署,减少系统内部的耦合度,增加整个系统的可维护性。
1.22
完善的安全机制
企业应用集成技术使复杂的业务流程、
大量的信息和数据在各IT应用系统和业务部门
之间高效的流转和共享,实现业务流程标准化和自动化,促进业务流程优化,提高建行运营效率。
任何不安全因素都会造成不可估量的损失,故所有数据的传输、处理、
交换都必须在良好的安全环境下进行,因此,必须建立一套完整的安全机制,以确保
整个通信系统的安全运行。
方案主要为
ESB系统提供如下几个方面的安全服务:
2.11密钥管理
密钥分发、密
提供安全有效的密钥管理方案,实现应用系统和ESB系统的密钥产生、
钥更新、密钥注销等。
提供密钥的自动更新机制,保证密钥的安全性,提供高效的对称密码算法,确保应用系统具有可用性和易用性。
2.12身份认证
保证接入ESB系统的合法性,提供应用系统和ESB系统之间的双向身份认证,采用
基于证书的认证模式,系统使用的数字证书由第三方
CA或者采用自运行维护的CA
提供。
CA证书采用离线下发的方式,以PKCS#12文件的格式安装到ESB系统和应
用接入系统。
身份认证完成后,双方得到一个64个字节的随机数,通讯双方使用的对称密钥都是
基于这一组随机数产生,对称密钥的选取规则双方使用相同的策略。
对称密钥和对方的公钥信息存放在系统主机的共享内存,方便应用系统加密使用
PKI技术实现
1.23通讯加密
应用系统和ESB系统
ESB系统的安全性是保障IT应用系统安全可靠运行的重要环节,使用
系统的密钥管理和通讯加密是目前解决此类问题的最有效途径,之间通讯的报文使用对称算法加密保护其机密性。
为了提高密码运算的处理速度,这
里推荐使用AES算法,密钥的长度为128bit。
通讯双方在身份认证完成后,在共享内存中保存对称密钥。
客户端和服务器端的加密流程如下:
客户端加/解密流程:
1)查询共享内存中的对称密钥和算法ID,根据加密要求选取对称密钥,如果共享内
存中没有对称密钥,加/解密失败。
2)使用查询得到的对称加密密钥,对报文进行加
/解密处理。
服务器端加/解密流程:
1)根据客户端的系统代码,查询共享内存的加密密钥和算法
ID,如果共享内存中没
有对称密钥,加/解密失败。
2)使用查询得到的对称密钥,对报文进行加/解密处理。
1.24关键字段MAC
2.13整体解决方案
ESB集成技术架构方案划分为四个层面:
渠道通迅接入、数据交换层、
务调度层、服务适配层。
系统的每个层次都可进行横向扩展,实际应用中系统处理能
力可以线性增长。
对于渠道服务请求的接入,ESB提供标准的通迅协议(支持
TCP/IP、HTTP、
SNA、
FTP、MQSeries、JMS等协议和中间件)和MBSD标准接口规范,同
时还为请求系统提供服务请求的API,屏蔽通讯协议和报文格式的技术细节,
够提高请求系统的集成开发效率、减少转换适配环节,同时还大大加强了总线系
统对接入的控制和管理,促进了集成应用的快速推广和可靠运行。
对于改造成本过高的存量系统,
通过集成开发在数据交换层实现分类路由、同步异步转换、消息格式转换、代码
转换等功能。
平台服务调度支持四种模式:
(—)、MB通道,用于高时效性、高一致,
生、咼吞吐
能力的服务;
(二)、WEBME通道,用于时效性和一致性要求不高的服务;
(三)、服务代理通道,目标架构过渡过程中,
与当期集成目标无关,可以采取“穿透
“代
的方式,减少实施工作量和实施成本。
另外,复用价值较低的服务请求也适合采用理模式”
(四)、低成本通道,对于实时性要求不高,且信息量大的服务,可采取批量处理模
式,降低集成实施成本及节省系统资源。
所有适配器需要在对存量系统分析后集成开发,
ESB集成方案中集成产品的相互
访问统一使用MQ队列方式。
1.25
接入控制
需要完成以下功能:
2.14对渠道提供不同协议的接入功能,包括MQ,webmethods,http等协议的接入。
2.15对不同的渠道提供不同的接入点,实现系统负载均衡和最大限度的故障隔离,提供
高容量,高可靠性的服务。
2.16参数服务为渠道提供统一服务接口模式,伺服渠道下载需要的通道接入信息。
2.17渠道通过轮询请求方式主动下载版本变化信息,初始化变化的连接池。
2.18服务端进行主动控制,实时控制渠道的接入通路。
2.19当某一接入点故障时,通过主动控制渠道接入点,自动切换到可以的接入点,实现
故障的完全隔离。
1.26对压力较大的接入点,通过主动控制,把部分数据切换到压力较小的通路,实现实
现负载控制。
1.27服务端为渠道维护相应标识信息和其所有当前版本和历史版本信息。
1.28通过维护历史版本信息,实现版本回退功能
实现方案:
2.20整体架构图
API
ESB
2.1.10
通信接入模块
负责和外部系统进行通讯,进行原始报文数据的传输。
通信接入层实现以下功能:
1.利用系统层通讯协议和请求系统进行通讯,包括
TCP/IP、HTTP、SNA、FTP、
MQSeries、JMS。
2.外部系统约定的通讯方式的实现,包括如何进行通讯连接,如何进行通讯应答,如何进行数据传输,如何约定通讯报文的大小,如何确定数据传输是否完毕,如何处理通讯错误,如何关闭通讯连接,如何处理通讯层数据完整性校验等。
3.识别外部系统类型。
4多通讯连接的并发处理。
以下的功能不需要由通讯接口层完成:
1.29非通讯层面的数据报文的加解密。
1.30非通讯层面的数据报文的压缩,解压缩处理。
通讯接入层屏蔽了所有的通讯细节,数据交换层只知道从某个外部系统获得了或者发
和数据交换层本身无关。
送了一个数据报文,至于该数据报文是如何获得或者发送的,
2.21
请求系统适配
完成从服务端返回数据到标准输出之间的转换或从一个渠道端请求接口数据到
MBSD服务标准请求数据之间的转换。
具体功能包括:
2.1.11应用层面的数据报文的加解密。
2.1.12应用层面的数据报文的压缩,解压缩处理。
1.31数据报文类型的识别。
1.32数据报文的打包拆包,根据报文类型以及相关配置将数据报文拆分成统一的数据接
口或者相反。
1.33数据接口之间的转换,根据定义的规则从一个数据接口转换成服务数据接口或者相
反。
接入适配层屏蔽了数据的具体物理表示和组织,平台服务调度层只知道收到了一个服
务请求要求处理,至于该服务请求是从哪个系统发起的,原始的请求数据是什么,和
服务整合层没有关系,只和数据交换层有关。
接入适配框架提供可配置的定长、变长报文转换适配器,以及可扩展的接口可以适应
各种不同格式的报文转换。
同时接入框架提供了MBSD元数据管理功能,
能够方便的
定义报文的元数据,为报文的转换以及应用的开发提供便利。
2.22集成服务功能
2.1.13
服务治理
提供服务标准定义、服务封装、注册与发布等功能
提供位置透明性的服务路由和定
经过抽象、归纳形成,服务
位服务ESB的服务接口规范应该基于对业务流程的理解,
接口规范独立与现有系统的具体实现,接口规范具有较强的独立
性、稳疋性。
从而真
正消除请求系统与服务系统之间的关联关系,实现服务的位置以及服务的具体实现与
服务的访问过程无关。
我们提供MBSD规范落地实施的工具:
元数据管理,
服务接口定义配置,导入导出工
具(可以通过web页面形式和导出文件形式对外公布)
服务规范适配的开发框架。
我们提供MBSD规范落地实施的工具:
元数据管理,
服务接口定义配置,导入导出工
具(可以通过web页面形式和导出文件形式对外公布)
服务规范适配的开发框架。
1.34
提供对出错服务的及时检测和隔离功能
ESB系统实时检测服务系统的服务状态,当服务出现异常时,能够及时发现,通过监
控平台发出报警,通过人工手段或预先设定的规则,对状态异常的服务或服务系统进
行迅速隔离,避免因故障导致服务阻塞,保证请求系统对其他服务的正常访问。
1.35
协议转换
支持外部系统通过TCP/IP、HTTP、SNA、FTP、
MQSeries、JMS等协议和中间件
与ESB平台通讯。
般情况下,请求系统使用ESB系统提供的API,
按照ESB系统的技术标准和服务
规范进行服务访问,从而避免不必要的协议转换开销。
但是对于请求系统无法改造或改造成本过高的情况下,
ESB系统应提供接入协议适配
的功能,支持外部系统通过不同的通讯协议与
ESB平台通讯。
但是应注意,ESB更多的情况下是为了适应服务系统的技术差异,
才进行通讯的适配,
从系统的规范化和易维护性角度考虑,不推荐被动的对请求系统进行通讯协议适配。
接入框架提供了对各种通讯协议的转换适配器,可以满足上述协议转换要求。
MQ自
身作为消息中间件为JMS通讯协议提供底层的通讯服务。
但
ESB作为企业服务总线
需要有大吞吐量,而同步服务并发有限,容易造成资源的阻塞,以异步的方式进行访
问而MQ作为消息中间件,是最好的异步通讯方式。
1.36
消息格式转换
支持通过元数据管理消息格式定义;支持任意类型报文之间的转换。
消息格式转换是集成类系统应具备的基本功能,
ESB系统对于消息格式的转换是基于
配置实现的,因此消息报文的的数据域需要在配置中进行定义。
ESB的服务接口规范标准中包括规范中使用的数据域。
在
ESB系统内部数据域分为
不同的类型、长度、精度等表示形式,
ESB系统引用预先定义的、规范化的元数据对
服务接口规范进行描述,使用元数据可以是规范定义工作更加规范化、减少冗余、便于管理和统一维护。
元数据可根据应用范围划分成不同的“域”,可以更加方便的进行方便维护和管理。
包括:
格式转换和数据映
ESB系统一般通过配置方式实现标准与非标准的报文转换,
射,对于复杂的映射规则可以通过增加映射功能函数(服务组件)的形式实现
MBSD接入框架提供了可配置的定长、变长报文转换组件,以及可扩展的接口可以适
应各种不同格式的报文转换。
同时接入框架提供了MBSD元数据管理功能,
能够方便
的定义报文的元数据,为报文的转换以及应用的开发提供了便利
目前已经支持XML,
定长等多种报文格式。
1.37
服务路由
基于服务ID、内容、结果等方式路由;交易流程能使用智能路由组合多个子交易。
我们采用两个层次的路由:
前端API进行的服务通路路由。
前端API根据ESB平台提供的接入参数信息决定
采用哪条通路(MB/WEBMETHODS
)进行服务访问。
核心的交易路由。
由MB/WEBMTHODS核心进行路由,根据交易码决定哪个后台
服务系统进行服务访问。
路由方式:
服务ID路由
也就是交易码进行路由判断。
数据依赖路由
动态的根据报文中的数据和配置业务规则进行路由选择。
复杂流程路由
在复杂组合交易中根据每一步的响应结果和配置的复杂交易流程来
进行路由选择。
此路由在ESB平台的流程配置来实现
1.38
监控和运维
提供服务调用的记录、测量和监控数据;提供事件检测、触发和发布功能;支持产品
版本升级后对现有组件的兼容,
性。
ESB系统应记录每一次服务访问的流水信息,
用于统计和分析。
记录过程应该
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 企业 服务 总线 ESB 方案