数据物流平台

一、产品说明:

“数据物流”是借鉴现实社会中“物流”运营的理念与机制，在网络中构建一个虚拟的物流平台。数据物流平台按照用户定义的数据流转策略、时间策略、并发处理策略、事件触发策略，实现各类数据的传输、汇集、流转、分发，并监控数据流转各环节的详细信息。由数据物流调度中心、数据物流管理、可靠数据传输通道，及发送节点、中转节点和接收节点构成。各个节点在调度管理中心的指挥下将数据安全可靠及时的传输到目的地。

二、功能特点：

1、支持B/S、C/S两种管理方式；

2、支持大数据量的并发传输；

3、将MQ传统的被动接收，变为主动抓取；

4、支持各个节点之间的双向数据抓取交换，可以实现数据上报、数据下发等功能；

5、支持数据的批次管理，对每次抓取传输的数据可以进行批次管理，方便用户使用；

6、丰富的时间策略配置，可配置数据抓取交换的启动时间为定时启动、周期启动、其他触发方式启动等等；

7、丰富的数据传输路径配置，可配置各种数据的传输路径，数据交换的路径可以任意灵活配置，满足实际应用需要；

8、可配置断点续传的策略，如断点续传的尝试次数、时间间隔，以及断点续传失败触发的相应机制；

9、抓取传输进度可视化监控；

10、提供了功能丰富强大的系统管理功能，并支持多种登陆管理方式，各节点用户可以登录到统一的B/S站点进行系统管理，方便应用；

11、支持用户自定义数据文件类型；

12、提供数据检测功能，可以检测传输的文件是否满足标准，并进行日志记录； 可靠传输模型，为了保障数据有效准确的传输，采用合理的数据传输模型，建立电子回执机制；

13、数据校验，数据物流平台在数据抓取、传输过程中进行数据校验，在数据达到目的地之后进行校验，确保数据的准确性；

14、数据加密，对数据进行加密传输，可根据用户需求挂接不同的加密算法；

15、数据压缩，对数据进行压缩传输，可根据用户需求挂接不同的压缩算法；

16、并发传输，在抓取、传输大数据量时使用并发处理机制，提高工作效率，减少网络占用时间，每个节点可支持30个以上线程同时传输。