<p >1、数据中台解决方案目录CONTENTS建设背景建设方案实施路径数据中台简介数据服务化数据中台是培育业务的创新的封方法土壤,是利用数据促进业务创新的保障。数据中台释放数据价值运营数据资产数据智能化通过大量智慧算法训练数据细胞,形成数据大脑,产生智慧的力量,预先洞察未来。数据标准化统一建模、统一视图、统一管理。避免重复抽取和维护带来的成本浪费。数据资产化数据不断的进行补充,数据模型不断地进化,通过对数据不断地完善,使其从最初的单一字段逐渐成长为最为宝贵的数据资产。我们懂你所需!实现价值数据中台 解决数据“存”、“通”,“用”难题 用一切数据 业务化 存一切业务数据化 通信息互通互连,打破信息孤岛数据</p> <p >2、中台是分布式数据平台之上,根据不同客户的业务场景量身打造的一套智能解决方案,基于“大数据”时代的数据价值的挖掘与运营及管理,赋能企业提升竞争力。设计原则高内聚低耦合主要从数据业务特性和访问特性两个角度来考虑:将业务相近或相关的数据、粒度相同的数据设计为一个逻辑或物理模型;将高概率并发访问的数据放在一起,将低概率并发访问的数据分开存储。高内聚低耦合主要从数据业务特性和访问特性两个角度来考虑:将业务相近或相关的数据、粒度相同的数据设计为一个逻辑或物理模型;将高概率并发访问的数据放在一起,将低概率并发访问的数据分开存储。数据可回滚处理逻辑不变,在不同时间多次运行数据结果确定不变。成本 与性能 平衡适</p> <p >3、当的数据冗余换取查询和刷新性能,不宜过度冗余和数据复制。核心模型与扩展模型分离建立核心模型与扩展模型体系,核心模型包括的字段支撑常用核心的业务,扩展模型包括的字段支持个性化或少量应用的需要,不能让扩展字段过度侵入核心模型,破坏了核心模型的架构简洁与可维护性。开发过程规则表命名需清晰一致,表名需易于消费者理解和使用,相同的字段含义在不同的表中字段命名必须相同,必须使用规范定义表中的名称。数据中台设计原则建设目标01形成标准体系规范信息资源目录标准交换共享标准监督管理规范02打通信息孤岛实现各委办局信息集中与交换共享03实现数据汇集形成人口、法人、宏观经济、地理信息等公共基础库与行业专题库04决策</p> <p >4、支撑 为政府、企业提升提供数据支撑,提升决策水平,改善机构运营理念,打造数字化产业。目录CONTENTS建设背景建设方案实施路径整体架构以云计算、大数据、人工智能技术为基础平台,搭建全域、实时、智能的数据中台行业定制数据应用网站统计移动统计客流统计DMP经营分析性能监控经营分析智能报表管理决策网站统计广告营销接待大屏媒体大屏驾驶仓日志分析用户图像搜索引擎营销引擎智能风控舆情分析分析报表数据大屏机器学习人脸识别图像识别全域数据中心萃取数据中心统一ID数据类目体系数据标准体系数据地图数据血缘资产分析资产管理资产运营数据资产数仓规则指标规范模型构建数据同步数据开发数据研发数据集成实时计算离线计算机器</p> <p >5、学习数据管理任务调度任务运维智能数据中台外部数据爬虫数据埋点数据日志文件业务数据库ERMCRM数据源建设内容-信息资源目录系统元数据管理指标管理分类管理标签管理数据目录梳理摸清家底一数一源支持共享协同数据编码管理元数据业务元数据技术元数据机构事项数据项按主题按业务领域按性质是否开放/共享开放/共享条件开放/共享程度前段码后段码数据交换API应用资源图谱数据画像资源应用信息资源目录系统-目录梳理摸清了全市政务数据“家底”,绘制了全市政务数据地图。统一的业务/技术术语描述统一的管理/技术工作规范全业务域的方式定位了全市政务数据资源基础信息资源梳理信息需求获取现状信息环境调研信息需求分析顶层建模设计</p> <p >6、原始资料获取信息需求访谈获取现有系统资源分析信息环境数据需求分析组织结构分析业务角色分析系统功能建模系统数据建模信息分类编码系统体系建模信息资源目录系统-成果物信息资源目录系统-目录梳理资源画像资源流通资源应用资源运营资源目录图谱展示图谱挖掘关联关系全景展示资源分类展示单一资源属性图谱资源间关联关系图谱匹配度关联资源筛选资源间调用关系算法模型语义分词机器学习样式定义资源定义分类定义图谱定义大数据中心-数据存储数据仓库技术架构混合存储传统BIOracle 数据体系Hadoop 数据体系Oracle RAC原始库关联库ins1ins2ins3数据整合数据清洗数据加载Hadoop生态挖掘、分析全文检</p> <p >7、索融合存储体系专题库基础库异构数据来源(结构化、图像、网页、文档、视频)业务数据其他数据结构化数据异构数据抽取、清洗、转换、分析、加载实时数据处理建设内容-共享交换平台大数据运维监控体系大数据标准规范体系BI大数据挖掘、分析数据模型政府数据数据抽取、网络爬取数据采集数据管理数据分析数据应用元数据库数据传输(MQ、ftp)资源目录爬虫互联网数据政务资源原始库主数据库(基础库-人口、法人、宏观经济、gis、建筑物)专题库(专题应用库)标准库数据库管理数据质量管理数据标准管理数据资源监控数据服务数据查询全文检索数据比对数据交换目录服务数据服务应用服务GIS服务视频服务用户权限舆情库信息资源目录BI工</p> <p >8、具大数据平台数据建模与可视化企业服务总线服务注册服务授权服务计量服务监控标准服务接口共享交换可视化服务总线智慧城市管理电子政务智慧金融智慧交通智慧医疗共享交换平台-逻辑结构大数据中心-业务流程1 资源编目目录服务中心2 注册3 维护4 发布5 查询6 发现7 获取公安局 人社局 卫计委 民政局 发改委 经信委 统计局 国资委 安监局信息资源门户前端设备前端设备前端设备前端设备前端设备前端设备大数据中心平台人口法人宏观经济地理空间共享交换平台-数据流图系统资源公安业务系统民政业务系统计生业务系统.业务系统政务信息共享交换平台前置数据采集数据清洗(映射、转换)数据标准化数据回溯(追溯、绩效评估、优</p> <p >9、化建议)数据目录化面向对象部门间数据交换对外数据共享面向公众智能公共信息服务面向企业智能行业信息服务工商业务系统政务信息资源库(基础库、专题库)共享交换平台-数据融合数据库-建库原则 原则: 一数一源 多元采集 入库比对 及时更新 权威发布 导向: 面向领导决策 面向部门共享 面向社会开放 构造产业生态大数据中心-数据库数据源政务中心工商税务公安人社数据交换数据交换总控数据交换网关异构数据桥接数据清洗转换共享数据目录数据共享监控数据池基础信息库人口库法人库空间地理信息库专题信息库房屋库城市部件库信用库宏观经济库基础库-人口库大数据中心-GIS库1 0.5米近期卫星影像数据、DEM数据(30M)</p> <p >10、GIS库2二维电子地图数据3POI数据点(大约10类)4地名地址数据5建筑模型数据,景观数据6业务专题数据,比如地下管线数据7监控设备数据,位置,监控数值,分类大数据中心-标准规范信息资源目录体系标准规范人口基础信息库标准规范法人基础信息库标准规范标准规范安全防护技术标准规范基础信息库数据代码目录规范数据交换标准规范政务信息资源共享管理办法大数据中心项目管理规范大数据中心安全管理规范管理制度政务信息资源交换体系国家电子政务整体框架政务信息资源目录体系法律法规与标准化体系管理体制部门数据清洗规则人口法人库比对规则数据处理流程规范政务及公共服务信息资源共享实施协议数据服务接口规范数据管理平台-总体</p> <p >11、功能数据管理Product 1数据清洗Product 2数据比对Product 3数据元管理Product 4规则管理、整合流程管理Product 5作业管理数据管理平台通过数据交换系统采集交换至中心的各类参建部门的数据,提供了统一的数据转换、清洗、比对和整合加工功能模块,形成了基础信息库、业务基础信息库、主题信息库以及元数据库。在共享数据服务的基础上实现了共享服务管理、统计分析以及信息直报等功能。数据管理平目标与功能1、全面了解系统数据的规范,反映大数据平台涉及的各源业务系统的数据质量; 2、不断完善和提高大数据平台和各源业务系统的数据质量,实现数据更大的价值。 监控整个系统运行情况 、对建</p> <p >12、立基础信息库及相关指标体系的有效管理;实现中心的用户认证、信息授权、系统管理等。 数据管理平台-清洗、比对、入库数据管理平台-数据清洗模块元数据管理数据规则管理数据服务安全管理记录数据源结构信息,数据源操作基础,提供注册、加载、查看功能图形定义规则,提供规则引擎、存在规则仓库采用SOA架构,提供清洗、比对、加载、转换、共享等基础服务用户权限管理,数据传输安全数据管理平台-数据清洗模块 基于运行时软件体系结构重建技术研发的API生成、运行与管理中间件平台,它提供了一种对原业务系统无侵入的“所见即所得”的数据获取方式,通过智能化的API生成,实现原系统对外服务能力。学习生成部署运行管理源系统数据服</p> <p >13、务APIAPIAPIAPIAPIAPIAPI外部系统数据管理平台-脱敏脱密指对某些敏感、保密信息通过脱敏脱密规则进行数据的变形,实现敏感隐私与保密数据的可靠保护。分别从数据层脱敏脱密和应用层脱敏脱密,确保敏感与保密信息没有漏网之鱼。数据层脱敏脱密挂号信息人社健康档案社保信息就业信息卫计公安学校信息教育电子病历学籍信息教师信息数据脱敏规则数据脱密规则抽取裁剪转换验证城市大数据应用层脱敏脱密自动扫描不可逆转化屏蔽式输出模型管理大数据中心-服务体系消息推送服务聚合专题库开放开放平台服务安全异常报警服务监控大数据服务总线服务注册服务编排智能路由PGIS服务图像服务视频服务第三方服务信息资源库公安计生教</p> <p >14、育社区大数据中心-平台应用数据开放平台 核心目标是提供与民生相关的数据资源和服务,为基于开放数据的应用提供全方位的服务支撑,开放门户主要提供数据查询、下载、API开发服务等功能。目录CONTENTS建设背景建设方案实施路径技术路线-可信开发流程安全活动DCP/TR检查点IPD安全活动融入决策检查点,合同和技术评审/其他评审或检查点安全需求安全设计安全开发安全测试安全交付和维护安全需求分析安全威胁分析安全架构/特性设计开源及第三方软件选型代码安全检视代码安全扫描报告安全测试方案和用例安全测试报告(包括开源软件)安全补丁(含开源软件及第三方软件)软件外包(安全需求传递, 设计评审,代码安全审查,安全测试验收)配置管理 (代码,文档,研发工具,开源软件) 安全基线、规范、标准、指导书ConceptTR1PlanTR2TR3DevelopmentTR4TR4ATR5QualifyTR6LaunchGALifecycleCharterCDCPPDCPADCP安全活动贯穿IPD开发流程技术路线-可信开发流程理论研究与技术研发、数据分析与综合利用相结合要进一步明晰政务数据建设的各项指标,深入研究政策文件要求,积极探索参数预警机制。要做到在系统功能实现方面既能想得到,又能具体</p>
讯享网

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容,请联系我们,一经查实,本站将立刻删除。
如需转载请保留出处:https://51itzy.com/kjqy/149215.html