大数据处理平台总体建设方案.pptx

《大数据处理平台总体建设方案.pptx》由会员分享，可在线阅读，更多相关《大数据处理平台总体建设方案.pptx（33页珍藏版）》请在悟道方案网上搜索。

1、大数据处理平台总体建设方案,核心建设内容,大数据处理平台架构,大数据处理平台总体架构设计,大数据处理及应用平台总体功能结构,实现示例总体实现思路,HIVE/Impala,HDFS/HBase,M/R,Spark,数据接入,数据分析,智能分析系统,Storm,Solr,系统管理,数据使用,服务管理,Manager,OpenAPI/SDK,REST/SNMP/Syslog,Data,Information,Knowledge,wisdom,Yarn/ Zookeeper,安全管理,多维分析查询,大数据基础平台,FusionInsight Hadoop发行版本,FusionInsight MPP并行

2、数据库,FusionInsight Miner数据挖掘引擎,政务应用(宏观经济运行分析。）,实现示例可视化的基础管控管理、便捷运维,向导式/一键式集群安装部署和扩容，简单快速 可视化的服务管理、资源管理、任务调度 全面的系统监控与告警管理，服务状态、节点状态（CPU、内存、硬盘、网络等）一目了然,实现示例可视化的集中用户权限管理,可视化的集中用户权限管理，易用、灵活、精细 可视化的多组件统一的集中用户权限管理，易用 基于角色的访问控制（RBAC），预定义权限集（角色）可重复使用，灵活 SQL引擎（HBase/Hive/SparkSQL）多层次（数据库/表/列级）、细粒度（Select/Dele

3、te/Update/Insert/Grant）授权，精细,实现示例多层级的多租户管理,可视化的多级租户管理，与企业组织结构相匹配，简化系统资源分配与管理 与组织结构相匹配的多级的租户模型，不同部门对应不同的租户，按需动态增删租户 一站式管理租户资源管理：计算资源（CPU/内存/IO）、存储资源（HDFS）、服务资源（HBase) 基于linux cgroup容器机制的租户资源隔离，为租户SLA保驾护航 租户资源使用情况实时监控,实现示例一站式平台支撑数据分析全流程,实现示例交互式数据探索和特征工程,实现示例便捷直观的拖拽式建模,Miner提供图形化的拖拽式数据建模,以可视化的数据流形式描述数据

4、建模的数据处理过程,实现示例对分析模型全生命周期的管理,提供分析模型的生成、发布、上线， 调整全生命周管理,实现示例提供并行化机器学习算法,政务大数据中心相关典型案例市政务大数据资源目录体系建设项目,核心建设内容,大数据应用解决方案,政务大数据总体应用框架,大数据+经济运行监测,监控中心,指挥中心,决策中心,服务中心,保障中心,考核中心,集城市运行管理、运营监控、应急协调、辅助决策、民生服务为一体,跨地区、跨行业、跨部门的城市信息共享融合、互联互通和业务协调,城市运行服务管理中心（指挥舱）,公安,交通,社保,环保,安监,工商,民政,城管,市政,经济,旅游,教育,科技,大数据+城市运行管理,大数据+政务服务,解决方案充分运用云计算、大数据、虚拟影像等技术，实现信用信息的采集、查询、分析、挖掘、监管等功能，并融合大数据开放理念，将信用数据资源脱密后，逐级开放给征信机构和社会公众。,大数据+城市公共信用平台,大数据+精准扶贫,大数据+精准招商,大数据+舆情监测,大数据+动态交通信息服务,大数据+流动人口管理,大数据+消费维权,大数据+居民健康管理,大数据+公共卫生监测（疾病防控）,大数据+社会救助服务,大数据+社区养老服务,大数据+食品安全监管,大数据+生态环境保护,谢 谢,