某设备研究所分布式数据存储系统
该研究所生产实验过程中会产生海量机器数据的文件,由于没有一个统一的管理入口,导致数据文件管理混乱。经常出现数据文件丢失,数据文件联系人错误等问题。同时在业务上,针对不同专业其关注的数据文件、数据指标都不相同。基于这些现状,迫切需要一个系统来管理数据文件,包括从导入、解析、标注、分析、归档全流程管理。并针对不同专业有相应权限观看。实现数据文件全流程管理,做到有迹可循,责任清晰。
该研究所生产实验过程中会产生海量机器数据的文件,由于没有一个统一的管理入口,导致数据文件管理混乱。经常出现数据文件丢失,数据文件联系人错误等问题。同时在业务上,针对不同专业其关注的数据文件、数据指标都不相同。基于这些现状,迫切需要一个系统来管理数据文件,包括从导入、解析、标注、分析、归档全流程管理。并针对不同专业有相应权限观看。实现数据文件全流程管理,做到有迹可循,责任清晰。
使用分片导入、并行导入技术导入文件,使用平台对象存储系统职能策略化处理各类文件,后端对接HDFS、FastDFS、Hbase等。
自研的高速数据库,实现50毫秒内数据检索,页面顺利获得缓存和实时渲染技术实现数百万数据点毫秒展示。
自研的高速数据库,采用机器数据专用压缩算法进行数据压缩。
现在开始,开启您的数据智能之旅
7X12小时服务
专家一对一持续业务保障
响应零延迟标准化实施
全智能实时监控强大的交付能力
实现客户价值