统计局大数据统计平台建设方案 智慧统计大数据云平台建设方案 下载本文

E──经验系数为2;

J──考虑服务器保留30%的冗余,取0.7;

根据业务量估算,3年后系统要支持同时在线用户数为370440人。

P=370440*0.7*6*2/0.7=4445280≈445万

(2)应用服务器处理能力技术指标分析

根据大数据工程设计规范中的主机处理能力公式: 主机处理能力(TPMC)按下列公式计算:

P?m1??1??2?K160?J1

式中 P──主机处理能力,单位为每分钟处理的交易量(tpmC);

m1──预测近期年的日均交易量,单位为笔;

?1──忙日集中系数,一般取2~4,取4; ?2──忙时集中系数,一般取0.2~0.25,取0.25;

K1──平均交易复杂度,一般取4~10,取8; J1──主机处理能力保留系数,取0.7。 P1=370440*4*0.25*8/60/0.7=70560≈7万

(3)报表服务器处理能力技术指标分析

由于报表服务器主要用于固定报表的生成和显示,因此,报表服务器的主机处理能力(TPMC)可以按下列公式计算:

56

P?m1??1??2?K160?J1

式中 P──主机处理能力,单位为每分钟处理的交易量(tpmC);

m1──预期未来第三年报表的日均业务访问量,单位为笔;

?1──忙日集中系数,一般取2~4,取4;

?2──忙时集中系数,一般取0.2~0.25,取0.25;

K1──平均交易复杂度,一般取4~10,取8;

J1──主机处理能力保留系数,取0.7。 因此,报表服务器主机处理能力需求: P=740880*4*0.25*8/60/0.7=141120≈14万

(4)数据库服务器处理技术指标分析

根据大数据工程设计规范中的主机处理能力公式: 主机处理能力(TPMC)按下列公式计算:

P?m1??1??2?K160?J1

式中 P──主机处理能力,单位为每分钟处理的交易量(tpmC);

m1──预测近期年的日均交易量,单位为笔,取日均交易量的1.5倍;

?1──忙日集中系数,一般取2~4,取4;

?2──忙时集中系数,一般取0.2~0.25,取0.25;

K1──平均交易复杂度,一般取4~10,取8;

57

J1──主机处理能力保留系数,取0.7。 P=370440*1.5*4*0.25*8/60/0.7=105840≈11万

(5)内存容量技术指标分析 内存容量的计算应考虑的因素: (1)主机操作系统运行开销; (2)运行时内存数据库所使用的内存; (3)运行时中间件所占用的内存; (4)数据库数据读写缓存; (5)应用系统所占内存;

(6)网管及其它应用如安全审计、交易监控等所用内存。 内存容量选择时还要考虑到主机正常运行时,内存利用率不应大于70%,才能保证系统在业务高峰时具有较强的抗冲击能力; 一般内存建议128G-256G,具体配置由常用业务计算数据大小决定。

(6)存储容量技术指标分析

业务系统数据涉及统计局数据、省发展改革委数据、住建

部门数据、国土部门数据、金融机构数据、税务部门数据、互联网电商类数据、互联网房产类数据、互联网消费类数据、互联网分类信息数据、互联网招聘类数据、互联网医疗类数据、互联网交通出行类数据、互联网财经类数据、互联网汽车类数据、互联网信托类数据等数据,预计月增量为1200GB(即1.17TB)数据,一年的数据预计为14.06TB的数据量。

58

业务数据预估 数据源 统计局 数据 数据描述 投资项目数据、交通运输统计数据、“三新”统计数据、文化产业统计数据、国民经济统计数据 项目名称、计划总投资、累计完成投资、本年完成投资、PPP项目进展情况、中央预算资金、专项建设资金、企业债券等 公路、水路、航空、管道运输企业、以及运输辅助企业等数据 新商品房可售面积、发放施工许可证面积、方法预售许可证面积、新建商品房成交面积、二手房成交面积等数据 土地出让面积、按市州及土地用途分组的各项分项数据 中长期贷款、固定资产投资贷款、房地产开发贷款、个人按揭贷款等数据 企业、个体工商户、商品交易市场信用等数据 基础教育、特殊教育、职业技术教育、校外教育、成人教育、高等教育等数据 血站、社区卫生、食品安全等数据 申报管理、审单作业、接单审核、出证管理等数据 建筑业营业税/增值税、房地产营业税/增值税、企业所得税/增值税等数据 来自阿里巴巴、京东、淘宝、天猫等相关的电商统计指标数据 来自58同城的房产、安居客、Q房网、搜房网等相关的房产统计指标数据 59

月增量 一年数据量(GB) 80 (TB) 0.94 发改委 数据 交通厅 数据 住建部 数据 国土局 数据 金融机 构数据 工商局 数据 教育局 卫生厅 海关数据 税务局 数据 互联网电 商类数据 互联网房 产类数据 10 0.12 20 0.23 20 0.23 10 0.12 10 0.12 10 0.12 10 10 10 0.12 0.12 0.12 10 0.12 100 1.17 100 1.17