传输交换平台
一、产品说明:
随着公安信息化的深入,数据资源不断的丰富,数据资源之间的交换越来越频繁,越来越复杂。数据交换平台,采用java开发,遵循标准jms规范,在数据交换过程中,提供数据交换管理功能,提高数据交换效益和可靠性,支持大数据文件,对数据交换过程的异常进行告警等;能够实现从源到目标之间的数据校验、数据打包、数据加密、可靠传输、数据检测、数据入库等的全自动化,并提供交换过程的监控管理。
二、功能特点:
数据交换平台,可以按照用户定义数据交换过程中的数据流转策略、时间策略、并发处理策略、事件触发策略,实现各类数据的传输、汇集、流转、分发,并能够监控数据交换中数据流转各环节的详细信息。
1、将传统的数据传输的被动接收,变为主动抓取;
2、可以支持各个节点之间的双向数据抓取交换,实现数据上报、数据下发等功能;
3、支持数据的批次管理,对每次抓取传输的数据可以进行批次管理,方便用户使用;
4、丰富的时间策略配置,可配置数据抓取交换的启动时间为定时启动、周期启动、其他触发方式启动(数据条数达到一定量启动)等等;
5、丰富的数据传输路径配置,可配置各种数据的传输路径,如从某地公安局到省厅,然后由省厅到公安部,同时到其他省厅等。数据交换的路径可以任意灵活配置,满足实际应用需要;
6、可配置断点续传的策略,如断点续传的尝试次数、时间间隔,以及断点续传失败触发的相应机制;
7、可以提供数据检测功能,检测传输的文件是否满足标准,并进行日志记录;
8、可以提供数据自动获取工具,从数据库中直接快速、高效、准确的获取全量数据和增量数据,并形成指定格式的文件,之后将文件抓取传输到目标服务器,并将每一细节操作全部记录到日志中;
9、可以提供数据文件加载入库工具,该工具是完全可配置的,将数据文件快速、高效、准确加载进入目标数据库,并将每一细节操作全部记录到日志中;
10、数据校验,在数据抓取、传输过程中进行数据校验,在数据达到目的地之后进行校验,确保数据的准确性;
11、数据加密,对数据进行加密传输,可根据用户需求挂接不同的加密算法;
12、数据压缩,对数据进行压缩传输,可根据用户需求挂接不同的压缩算法;
13、支持大数据量的并发传输;
14、在抓取、传输大数据量时使用并发处理机制,提高工作效率,减少网络占用时间。