[00114168]数连通大数据采集服务平台

1、项目来源：自主研发 2、成果背景：随着互联网技术的高速发展,信息化建设在全球如火如荼的进行。但是,由于体制架构缺陷、标准化滞后、既得利益等原因,导致在信息化系统建设中无法做到信息资源共享,出现了“信息孤岛”现象。这些信息化系统中的数据和功能潜藏了巨大的价值,而对这些数据和功能开发需要对原系统进行修改与重构。需要协调多方,深度侵入原系统,开发周期高,开发成本大。 传统系统打通的方式,通过人工编写脚本的方式解决,难度大、门槛高。不同的页面,需要各自独立的采集脚本,工作量巨大。市场上一些存在的脚本录制工具,结合浏览器驱动,完全模拟人工点击的方式,对网页元素进行操作,存在元素定位不准确和加载速度慢的问题,录制的脚本须通过人工修整、调试,否则不能直接使用。运行采集脚本需要在各信息系统中执行操作,受网络宽带、速度的影响,复杂网页渲染耗费时间耗费性能。 综上所述,在系统间数据打通、融合的过程中,需要一种支持智能化的便捷快速的数据采集平台,它能够快速、简便的记录操作和数据映射关系。利用它可以高效、简便的记录操作,在图形化界面窗口,选择欲操作的元素,生成数据映射关系。通过设置服务接口的方式,利用数据映射关系,直接解析目标网页文档对象模型DOM树,完成既定的操作,打破系统壁垒,实现数据互联互通。 3、成果用途：通过数连通可以在系统开发商不提供任何支持的情况下,用户仅仅通过系统查询权限用户名和密码,即可建立信息系统的数据映射关系,实现其业务数据汇聚和系统间打通交互,可以有效解决政务、医疗、教育、金融、能源等行业中面临的“信息孤岛”“数据智能采集”“智能填报”“智能打通”大数据互联互通的难题,实现各行信息化“互联网+N”的智慧应用。 4、技术原理：台是基于WEB信息系统的数据映射及互操作技术,可以在系统开发商不提供任何支持的情况下,用户仅仅通过系统查询权限用户名和密码,即可建立信息系统的数据映射关系,实现其业务数据汇聚和系统间打通交互。 5、性能指标：1) 全面支持B/S架构系统 2) 支持直接数据采集和数据填报 3) 支持将源业务系统功能封装成实时数据接口 4) 智能生成组件,无需编写代码,简单易用,好维护 5) 验证码识别率高,支持个性化验证码训练识别 6) 支持集群化,稳定性好,性能高 7) 密码加密,安全性好 8) 具备完整的日志记录和监控告警,易运维 9) 可根据客户需要,定制开发 10) 千台分布式集群,支持弹性扩展 11) 百万级数据采集、填报 12) 支持百万级数据服务接口高并发 6、技术先进性：具备极强的自主学习、智能操作及校验能力,主流业务系统全兼容,且支持百万级数据采集、填报和数据服务接口高并发,99.9%数据安全传输,易用性融合度高。 7、技术成熟度：该技术广泛应用于政务、医疗、教育、金融、能源等行业中面临的“信息孤岛”问题,已成功应用于政务领域大数据采集服务;本产品质量指标能满足客户的需求,特别是“数据采集”,“数据自动填报”根据《GB/T 37722-2019 信息技术 大数据存储与处理系统功能要求》《GB/T 21062.2-2007 政务信息资源交换体系 第2部分：技术要求》等关键指标执行,并均优于国家标准。 本产品经安徽省软件测评中心检测根据GB/T2500.51-2016系统与软件质量要求和评价（SQuaRE）质量要求和测试,产品数据功能性、安全性等参数均通过检测 （检测报告：ASTC2020010290）。经安徽省软件行业协会认定为软件产品（证书编号：皖RC- 2020-0120）. 8、应用情况：目前已于芜湖市大数据中心、芜湖市公安局、芜湖市纪律委员、中国电信、建设银行等政府企业单位合作。 9、获奖情况：产品公司已获科技型中小企业备案,并通过GB/T19001-2016/ISO 9001:2015质量体系认证。