大数据中心:总体架构和技术架构、IDC机房建设
2020-08-26 10:37:16 5 举报
大数据中心:总体架构和技术架构、IDC机房自建
作者其他创作
大纲/内容
容错管理-提供熔断、隔离、限流、降级等容错措施:Hystrix
财务信息管理
React
生产部门
培训管理
运维
组织架构 : 跨职能团队
档案管理
Angular
服务注册与发现:Eureka,Zookeeper、Consul、Etcd
HTML5
用户信息
GraphX
质量管理
Ooize
测试
文件存储
电视大屏端
总体架构
用户层
galley:规则中心。
大数据存储
文本
立项
财务部
DevOps、CI/CD
Docker
服务端操作系统:linux
PC端
IDC自建机房
交换机
采集层
Envoy:API代理
验收
Sqoop
Spark
运行环境
调试
展现层
前端展现层
业务服务层
基本设计、方案设计、初步设计、设计施工图,第三方审查(消防申请、环境申请、规划申请等)。(如果配置柴油发电机和储油罐,需要3个月环评,否则一般一周可以完成环境备案)
Vue
客户管理
ZooKeeper
HDFS、MySQL、Redis:数据库根据需要采用传统数据库或大数据。进行分库或分表设计。每个服务应使用独立的数据库,避免交叉使用增加耦合度。
阿里云、腾讯云
SparkSQL
施工
驾驶舱
logstash
采购管理
数据库存储
服务层
企业资源管理
对象存储:Swift
镜像管理:Glance
pilot:配置中心。服务发现,动态路由、熔断限流等。
网络流量和IP控制:Neutron
Filebeat
网关层
销售管理
云计算框架:OpenStack
HBase
6)金融行业【JRT0132-2015】金融业信息系统机房动力系统测评规范(1)【JRT0132-2015】金融业信息系统机房动力系统测评规范JGJ 284-2012 金融建筑电气设计规范【住建部2012年发布】(1)JGJ 284-2012 金融建筑电气设计规范【住建部2012年发布】JR T0131-2015金融业信息系统机房动力系统规范【人民银行央行2015年发布】(1)JR T0131-2015金融业信息系统机房动力系统规范【人民银行央行2015年发布】7)抗震GB 50011-2010 建筑抗震设计规范GB 50223-2008 建筑工程抗震设防分类标准YD 5054-2010 通信建筑抗震设防分类标准YD 5059-2005 电信设备安装抗震设计规范YD 5060-2010 通信设备安装抗震设计图集YD 5083-99 通信设备抗地震性能检测暂行规定YD 5096-2003 通信电源设备抗地震性能检测暂行规定8)弱电智能建筑设计标准2015GB50311-2007综合布线工程设计规范(含条文说明)GB50395-2007《视频安防监控系统工程设计规范》9)通信行业(邮电类)YD 5193-2014 互联网数据中心(IDC)工程设计规范YD 5194-2014(互联网数据中心(IDC)工程验收规范)YD_T1821-2008通信中心机房环境条件要求YDT 2379.2-2011 电信设备环境试验要求和试验方法 第2部分:中心机房的电信设备YDT 2441-2013 互联网数据中心技术及分级分 类标准【报批稿】YDT 2442-2013 互联网数据中心资源占用、能 效及排放技术要求和评测方法【报批稿】YDT 2543-2013 电信互联网数据中心(IDC)的能 耗测评方法【报批稿】YD-T1754-2008电信网和互联网物理环境安全等级保护要求
web服务
MLlib
RDD
ElasticSearch
服务支持层
Web控制台:DashBoard
MapReduce
基础支撑层
互联网
工作进度
接入层
财务管理
MQ
支撑层
Citadel:密钥与证书管理。
负载均衡:Ribbon
Mixer:授权与审计。
绩效展示
业务层
磁盘阵列
Web:Java、Tomcat、SpringCloud
集团领导
SparkStreaming
数据中心
移动端
虚拟机管理:Nova
第一代微服务治理工具:替代ESB
销售展示
立项,用地规划。(注意地质、水灾等地质条件,环境条件,电力成本,能耗指标,网络条件)
自有服务器
OA数据 ERP数据 财务数据 其他数据
Jenkins
数据仓库
防火墙
分析层
通信层
磁盘管理:Cinder
标准规范支撑体系
Web
API管理:Feign
技术架构
YARN
日志监控:Zipkin、Sleuth、Metrics、Kafka
个人信息
权限管理:keystone
WebSocket
存储层
生产计划
数据库:MySQL缓存:Redis
办公自动化管理
审批流程
销售部
容器编排、资源治理
主数据服务
裸金属:HyperVisor
权限管理
IOS
业务应用服务
IDC自建机房相关标准
产品管理
Hadoop
Flume
1)国际标准LEED_2009NC中文版TIA_942-2_-2010-2TIA-942《数据中心电信基础设施标准》(中文版)美国ASHRAE数据中心热处理(翻译)2)国家标准GB50174-2017 数据中心设计规范GB50462-2015数据中心基础设施施工及验收规范GBT22239—2008信息系统安全等级保护基本要求《建筑工程施工质量验收统一标准》GB50300-20133)国家电网【QGDW345-2009】国家电网公司信息机房评价规范4)机房环境【YDT_1821-2008,工信部发布】通讯中心机房环境条件要求GBT 2887-2011 计算机场地通用规范GF 014-1995通信机房环境条件(暂行规定)YD 5039-2009 通信工程建设环境保护技术暂行规定YD T 1712-2007 中小型电信机房环境要求5)监控规范YD T 1363.1-2005通信局(站)电源、空调及环境集中监控管理系统第1部分:系统技术要求YD T 1363.2-2005通信局(站)电源、空调及环境集中监控管理系统第2部分:互联协议YD T 1363.3-2005通信局(站)电源、空调及环境集中监控管理系统第3部分:前端智能设备协议YD T 1363.4-2005通信局(站)电源、空调及环境集中监控管理系统第4部分:测试方法
开发
接口文档管理工具:swagger
公共服务层
Helm
组织架构
基于微服务的企业网关
单机调试、联合调试。
数据缓存
客户关系管理
K8S
第二代微服务治理工具:lstio
Mahout
Hive
信息安全保障体系
RPC
Kafka
数据库
招标、申请营业许可、申请开工、施工许可证(申请临水、临电、供气等)、开工、施工管理、外市电发电。调试:单机调试、联合调试。
Mesos
大数据:Hadoop、Spark
合同管理
Rest
10)蓄电池相关DLT_637-1997_阀控式密封铅酸蓄电池订货技术条件DL-T724-2000电力操作电源规范DLT5044-2004电力工程直流系统设计规程GB 8897.4-2002 原电池 第四部分:锂电池的安全要求GBT-19638.2-(2005)-固定型阀控密封式铅酸蓄电池GBT-19639.1-(2005)小型阀控密封式铅酸蓄电池 技术条件GBT22473-2008 储能铅酸蓄电池QC T 743-2006 电动汽车用锂离子蓄电池YD 1268-2003移动通信手机锂电池及充电器的安全要求和试验方法YD B 032-2009 通信用后备式锂离子电池组YD B 050-2010 VRLA蓄电池组在线诊断技术要求和测试方法YD T 799-2002通信用阀控式密封铅酸蓄电池组YD T 1360-2005通信用阀控式密封胶体蓄电池YD T 1715-2007 通信用阀控式密封铅布蓄电池YD T 2064-2009 通信用铅酸蓄电池正向尖脉冲式去硫化设备技术条件YDT 799-2010 通信用阀控式密封铅酸蓄电池YDT 2343-2011 通信用前置端子阀控式密封铅酸蓄电池YDT 2657-2013 通信用高温型阀控式密封铅酸蓄电池通信用阀控式密封铅酸蓄电池YDT 799-201011)运营商【QBCU 008-2010】中国联通绿色IDC技术规范v1.0中国电信【〔2009〕553号】数据用网络机柜和电源列规技术规范中国电信【QCT 2171-2009】网络机柜规范中国电信集团文件IDC机房设计规范2011中国电信数据中心机房电源、空调环境设计规范-2005中国电信灾备中心机房建设规范-2005中国移动电信级数据机房规范(v1.1)中国移动机房规范(V1.0)-2007年8月
考勤管理
日志
Ajax
配置管理-管理、更新、同步:Apollo、SpringCloudConfig
检查(消防检查、环境检查、规划检查等)、验收、质量审查、提供竣工材料。
鉴权,过滤、分流:Zuul
lstio是微服务的综合性管理工具,根据自身情况选择技术架构
Storm
Bootstrap/CSS/Ajax
Android
人事部
kafka mirrormaker
设计
DDD服务划分
0 条评论
下一页