DeepData大数据平台-
版本: V2.0 | 交付方式: License |
适用于: Windows/Linux | 上架日期: 2021-08-26 12:05:45 |
随着各行业 信息化 程度的加深,政企掌握的数据以指数方式日益增多,从TB 级发展到 PB 级, 再到 EB 级甚至往 ZB 级发展。数据类型也从原来的单一的结构化数据为主转变为结构化、半结构化、非结构化并重。伴随 数字化 转型的浪潮,政企逐渐意识到数据中蕴含的巨大价值。
面对如此大规模、种类的、标准不统一、来源不同的数据,如何归集、治理和应用,对数据拥有者提出了更高的业务能力和数据管控能力。如何定义数据指标?如何设计数据模型?如何梳理数据体系?如何安全可控使用数据?这都需要一套完善的 数据治理 方法论、技术和制度。
产品功能:
DeepData 大数据 平台底座环境,基于Hadoop生态圈的大数据计算引擎。对集群进行管理,例如对消息中间件Kafka进行添加、删除Topic等操作。监控数仓等存储容器的健康情况,对设置的各种任务指标和系统的具体运行情况进行全面的监控。多组件可以进行版本兼容间的整合。各单位无需额外投入人力物力进行开发工作,便可实现数据的安全、可靠上报。
通过数据采集汇聚功能,可以从不同结构的数据源中抽取数据,对数据进行采集,最后将数据加载到各种存储结构中。例如实现从多个异构的数据源(关系型 数据库 MySQL、非关系型数据库MongoDB )抽取数据,并加工成统一的数据格式,最后加载到 数据仓库 中。支持与各种主流数据库、 开源 数据库,消息中间件Kafka),标准RESTful风格API接口的数据采集。
通过融合治理功能对数据从创建到消亡的全过程的监控和治理,实现数据的统一管理,为企业保证了业务数据在采集、集中、转换、存储、应用整个过程中的完整性、准确性、一致性和时效性,从而帮助客户建立起符合自身特征的数据架构和数据治理体系,平台主要目的是发现并解决数据问题,通过一系列措施如:数据去重,脱敏等操作统一数据标准,规范数据,减少数据问题发生,整体提高数据的应用价值。将实现业务目标作为 数据管理 和服务的核心驱动力,优化数据架构,提升数据仓库/信息化管理系统建设,支持管理能力的提高、精细化和决策的科学性。
通过数据交换共享功能是基于DeepData大数据平台采集汇聚的数据资源,通过提供 API 接口,Kafka topic的方式,在数据整合和治理的前提下,以业务信息为基础,确定数据提供方和需求方之间交换信息指标及信息交换流程,实现各业务系统之间的数据共享交换,支持跨部门、跨层级、跨业务的数据协同。
产品用途及服务:
在 云计算 、大数据、人工智能快速发展以及5G全面商用的背景下,面向 “政务、政法、金融、教育、交通、能源”等重点领域。实现快速、自动、稳定、持续的数据质量提升,保证信息的可用性、一致性及安全性,确保及时、准确的数据支持和服务,加快数据实施人员、数据分析人员等针对数据质量、数据资产等数据管理项目的开发和部署速度。
产品优势:
DeepData大数据平台,基于数百个案例的成功交付业务基因与优势,作为睿呈时代三维可视的衍生能力,通过提供分布式存储、分布式计算、智能分析以及 数据可视化 的整套产品支持,帮助政府、企业建立了 一体化 的大数据平台。平台以元数据智能驱动,构建全域级数据资产管控中心,提供规范、透明、可感知的数据资产以及高效的数据服务能力,赋能数字化运营。