科技计划:
成果形式:新技术
合作方式:技术服务
参与活动:
专利情况:
未申请专利
成果简介
综合介绍
系统架构由基础硬件层、大数据存储层、数据处理层和应用层四层结构。
功能模块
根据系统架构设计,系统分为个功能模块:
1 现场数据采集模块
用于对现场设备数据进行采集,本地保存
2 数据转发模块
将现场设备数据通过4G网络转发到大数据平台
3 数据存储模块
将kafka中的数据保存到hbase数据库中
4 数据发送模块
将kafka中的数据实时发送给业务系统
5 数据接口模块
提供业务系统对hbase中的历史数据检索查询
6 大数据基础模块
整体hadoop系统环境
创新要点
整个系统使用大数据系统架构,实现海量数据处理,包括数据收发、存储、查询检索等
现场数据实时保存到消息队列
数据能够跨网络传输
历史数据采用分布式存储
能够实时接收远端发送过来的数据包,进行本地存储;可支持分布式、关系型数据库数据存储(至少支持hadoop、Sql);采用消息队列广播的方式将实时数据广播出去;提供API接口,能够将收到的不同来源、不同类型的数据包存储到分布式文件存储中;API接口,能够使上层应用可以对分布式文件存储中的数据进行读写。
技术指标
性能:提供5T的数据存储容量,可以根据需要随时在线扩充;数据接收能够处理每秒不少于100个数据源;系统能在内网接收多点组播数据,并可通过广域网包括4G网络进行传输;消息队列支持百万级吞吐量;可实现结构化数据的存储。
基础硬件:采用多台X86架构机架式服务器组成,总内存不低于640G,可用于实际数据存储空间不低于5Tb,缓存及系统部署采用SSD企业级固态硬盘;单台服务器:采用2U机架式服务器,千兆网络通讯、支持虚拟化计算架构、虚拟化存储部署,CPU单刻主频不少于8核2.1GHz,不少于2颗CPU,支持RAID0,1,5,10;工作电压200-240 VAC输入,10A;工作环境0-50℃;
其他说明
完成人信息
姓名:对接成功后可查看
所在部门:对接成功后可查看
职务:对接成功后可查看
职称:对接成功后可查看
手机:对接成功后可查看
E-mail:对接成功后可查看
电话:对接成功后可查看
传真:对接成功后可查看
邮编:对接成功后可查看
通讯地址:对接成功后可查看
联系人信息
姓名:对接成功后可查看
所在部门:对接成功后可查看
职务:对接成功后可查看
职称:对接成功后可查看
手机:对接成功后可查看
E-mail:对接成功后可查看
电话:对接成功后可查看
传真:对接成功后可查看
邮编:对接成功后可查看
通讯地址:对接成功后可查看