|
 |
概述
JWDTP数据传输平台是中国铁道科学研究院电子计算技术研究所自主创新、自主研发的具有自主知识产权的数据传输类中间件产品。它建立在消息中间件的基础之上，为大型分布式应用系统的数据传输提供了一个通用、稳定、可靠的传输平台。目前已在路内外各类大型信息系统中得到很好地应用，应用效果也得到了用户的广泛好评。
背景
大型分布式系统具有大量的计算节点，各节点间逻辑关系复杂，数据分布于不同的节点之上，于是，各节点间有效地数据共享、传输和同步是保证该系统的数据一致性、任务协调性的基础。随着分布式应用系统的发展，传输系统逐步从应用系统中脱离出来，成为一个独立研究和发展方向。
为了满足大型分布式应用系统数据传输的需求，目前大多数公司多采用以下两种方案：
一、 使用消息中间产品，例如IBM MQ、东方通TongLink/Q等产品作为底层传输平台，利用消息中间件的消息发送/接收API和数据库访问接口，例如Sybase Open Client、Oracle OCI等接口进行编程，以完成数据的导出、发送、接收、入库等操作，从而实现了各节点间数据的同步。采用此类方案，可以充分利用消息中间件强大的异步消息传输功能，保证数据传输的可靠性。不过也可以看出，采用此类方案需要用户对消息中间件和数据库访问接口有着较深的认识，用户需要进行大量的专业的程序编写工作。
二、 针对各自应用系统的特点，编写专用的传输软件。这类传输系统的优点是：可以实现任务由传输系统主动提交；具有直接处理应用数据的能力。但是在不同应用系统中它需要重复开发，所以它的不足也很明显：实现方式与业务逻辑绑定紧密，不利于系统的移植；传输需求考虑比较单一，没有广泛适用能力。
JWDTP数据传输平台综合了前两种方案的优点，抽象了各类分布式应用系统的通用传输需求，为分布式应用系统提出了新的传输构架模型，它的接口层直接面向应用数据，这是数据传输系统向平台化发展的一个飞跃。
体系结构
数据传输平台体系结构示意图
主要功能
1. 在传输任务方面支持异构数据库间、异构操作系统间、数据库与操作系统间的信息互传。
2. 在传输方式方面支持数据传输、信息传输与远程过程触发调用。
3. 在传输路径方面支持点对点简单传输、多点分发、单点转发和分发式转发。
4. 在传输校验方式方面支持提交校验、发送校验、回执校验；转发中的跟踪校验和阶段性校验。
5. 在安全传输保障方面支持网络中断、发送节点故障、接收节点故障等不可预测故障的传输备份和恢复。
6. 在触发方式方面既支持定期轮询，又支持业务应用主动触发。
7. 支持传输数据内容的压缩和加密。
技术特点
1. 实现了以策略库接口和调用过程接口为主的多种接口。JWDTP数据传输平台与上层业务应用系统间的接口以“策略库”和“调用过程”高层接口为主，为应用系统的各类信息传输提供了灵活的定制手段。
2. 主动应用数据处理。按照策略库定义，在传输任务的源点主动提取数据、提交传输任务；在传输任务的终点主动实现数据入库或上层应用数据处理。系统为上层应用承担数据传输相关的逻辑判断和数据信息处理工作，提供应用级的全面服务。
3. 实现传输周期和校验周期相结合。本平台将传输周期与校验周期结合为一个周期，为应用层的传输事务提供完整性保证。
4. 为应用层协议提供传输通道。应用层对待传数据的附加处理规则称为应用层协议，应用层协议的实现为分布式系统的节点间数据传输提供了更加灵活的数据控制手段。JWDTP数据传输平台的接口层深入到应用数据层，为应用层协议的交互提供双向的传输通道。
5. 并行任务处理能力。本平台采用并发多进程、任务存储调度、智能队列管理等技术，扩大了任务接受能力和处理能力。
6. 稳定、可靠的数据传输机制。面对着复杂的网路环境、操作系统环境和数据库环境，以及众多的外界干扰因素，本平台综合网络自动监测、断点续传等技术，有效提高了系统的稳定性和可靠性。
7. 多平台支持，支持windows、Linux、AIX、HP-UX、Solarise、UnixWare等操作系统。
应用
客票系统中的应用
“铁路客票发售和预订系统”是一个覆盖全国的大型分布式交易应用信息系统。该系统分铁道部客票中心、路局中心和车站三层结构管理。这个系统由中心和车站等分布在全国各地的2000多个数据节点和上万个交易窗口构成。该系统的数据结构复杂，主要包括席位数据、车次数据、票价数据、财务数据、计划数据、存根数据、余票数据、统计数据和其他管理数据。全路的车次信息和管理信息要由部中心通过路局中心下达各站，各个车站的交易信息通过所属路局上报部管理中心，并转发铁道部清算中心和营销分析中心。“客票5.0版”中实现了车次信息消息通知功能和席位复用功能，增加了各个路局的数据节点间的数据交互需求，如车次和交易数据在异局节点间也要完整一致。从而对传输系统提出了复杂的功能需求和性能要求。JWDTP数据传输平台以出色稳定的表现为铁路客票系统的数据传输提供了各个层次的传输保障，保证了客运售票业务的正常开展。
沪宁行车安全综合监控管理信息系统中的应用
沪宁行车安全综合监控管理信息系统的总体目标是：将沪宁沿线地域上分散的、由各专业部门独立管理的各类安全检测/监控系统与安全监控管理中心连接起来，实现各种安全监控信息的集中管理；以综合利用安全管理中心各种安全数据为目标，开发出一套完整的应用系统，以供电子化安全监控管理信息服务，构筑起集监控、管理和决策支持为一体的行车安全综合监控管理系统。
数据传输平台系统目前在该系统中承担的任务是:
1. 收集来自多种渠道的基础和全局性的公用数据源到路局和分局安全监控管理中心的数据库和数据管理系统，实现这类信息的集中维护和共享。
2. 将沪宁线上目前所部署的主要安全检测/监控系统所产生的、安全监控信息直接收集到安全监控管理中心，进行集中管理和综合利用。
3. 随着沪宁线及整个上海铁路局的各类相关安全监控系统陆续的部署和不断扩大的监控信息网络的覆盖面，部署在沪宁线上各专业的各类安全监控系统将全部通过传输系统接入综合安全监控网络。
4. 数据传输平台系统完成车载安全监控和故障诊断系统的无线数据的接入，构成地面和无线综合信息传输。
5. 在数据传输平台系统实现路局安全监控管理中心与上海局其它铁路分局安全监控管理中心的数据传输后，还将担负起上海局安全监控管理中心与全路安全监控管理中心的数据传输工作。
铁路假日运输办公室管理信息系统中的应用
铁路假日运输办公室管理信息系统融合了与铁路旅客运输业务相关信息系统的数据（如客票系统、统计系统、调度系统等），对其进行综合分析，以直观方便的方式展示分析结果、相关数据与警示信息。该系统可以为铁路运输办公室提供现代化的指挥、控制、通信以及信息分析技术手段，即C3I系统（Command、Control、Communication and System），以实现掌握旅客运输状况、动态调配运力、处理紧急状态和突发事件的功能。在春运、暑运等节假日客运高峰期该系统将为铁路客运管理部门提供随时掌握铁路旅客运输态势和运力资源的工具，为运输指挥调度决策提供辅助支持，并为日常旅客运输管理提供分析决策支持的平台。
数据传输平台系统在该功能中承担的任务是将采集的运能数据、调度系统数据、客票系统数据、现场图像等发送到铁道部假日办公信息系统中心数据库。同时，通过远程网络与各重点车站的图像监控系统连接，将现场图像传送至铁道部假日运输办公室，使其可以直接了解重点现场情况。
中软公司的合作与应用
中软公司在做项目集成时，很多的系统应用是点对点的业务数据传输，能供给他们选择的中间件满足需求的产品不是很多，在了解到我们的产品在该领域的应用成熟稳定后，选择了数据传输平台系统作为解决他们点对点的数据传输需求的中间件。在他们系统的应用中很好的满足了用户的各种需求。
应用前景展望
数据传输平台突破了目前的传输系统在两个方面所面临的限制。其一是消息中间件的接口层限制，其二是专用传输系统的移植困难、应用面受限的问题。数据传输平台重点研究并解决了接口层的定义及通用性难题，实现了面向应用数据层的数据传输，同时具有良好的可用性和可移植性。
由于数据传输平台能够适应复杂应用环境下的复杂数据传输业务需求，为企业级应用系统提供了通用的传输平台，具有广阔的应用前景。
数据传输平台是一个自主创新、自主研发、具有自主知识产权的软件产品，它的推广和应用将产生很大的经济和社会效益，对我国的中间件产业起到积极的推动作用。
附：《JWDTP数据传输平台技术评审意见》
2006年2月23日，铁道部信息办在北京组织召开了“JWDTP数据传输平台技术评审会”。与会专家和代表认真听取了技术研究报告、软件测试报告、用户报告，并审阅了相关的文档资料。经充分讨论，评审组形成如下一致意见：
1、JWDTP数据传输平台是面向应用数据传输的平台型中间件。它为企业级应用信息系统提供了高效、稳定及安全的数据共享和信息交换解决方案，符合当前信息技术的发展方向，技术方案先进，系统结构和各应用模块功能合理。
2、JWDTP数据传输平台采用了策略库接口和调用过程接口为主的多种接口形式，为应用系统的各类信息传输提供了灵活的定制手段，使应用系统易于部署、维护、移植。
3、该平台提供了应用数据主动处理功能。传输过程中的任务提交、任务实现和校验三个过程可由该平台主动完成，为应用系统承担了与数据传输相关的逻辑判断和数据信息处理工作，从而提供了应用级数据传输的全面服务。
4、该平台实现了传输周期和校验周期相结合的传输方式，提供了应用层协议交互的双向传输通道，为分布式系统节点间数据传输提供了灵活、可靠的数据传输手段。为应用层的传输事务提供完整性保证。
5、该平台研发过程规范，文档齐备，符合软件工程的要求，并已通过了国家应用软件产品质量监督检验中心的严格检测。
评审组一致认为“JWDTP数据传输平台”是一个自主创新、具有自主知识产权的中间件软件产品，已成功应用于多个大型分布式系统中，取得了良好效果，具有广阔的应用前景。一致同意 “JWDTP数据传输平台” 通过技术评审。
|
|
