简介:摘要:随着互联网技术的迅猛发展,各类信息每天以井喷式状态产生、传输和应用。为了适应信息时代信息管理的需求,分布式数据库应运而生。在传统的集中式数据库时代,信息存储和信息用户较少,集中式存储库只能够满足基本的数据管理需求。而随着信息用户增多,对于信息存储、传输管理的要求不断提高,在信息管理方面更需要大容量和高效率的数据库技术来确保信息高品质、高效率的应用。分布式数据库与集中式数据库相反,它将多个数据存储单元组合为同一个数据库,然后分存到不同的数据存储节点上,实现海量数据的超大容量存储和访问。研究分布式存储数据技术在大数据中的应用对于解决现阶段数据库存储问题有着重要意义。
简介:摘要:在互联网技术蓬勃发展的时代背景下,尤其是移动互联网的推广和普及以及无数新应用的诞生和变化,互联网中产生的数据量呈现爆炸式的增长,人们意识到海量的数据中存在着巨大的价值,大数据作为一个描述数据量的名词如今已经被广泛地使用,人工智能,机器学习,用户画像等新领域都离不开大数据的支撑。存储和管理大数据的技术同时也在不断发展,配合着云计算技术的发展,云存储技术也在不断地优化迭代。过去的云存储技术通常基于集群应用。在分布式文件和网格技术的前提下,分布式云存储技术能够通过软件将网络中链接的各种存储设备建立联系,将用户数据分别存放于这些设备中,大大提升了用户访问数据的效率和便利性。
简介:摘要视频监控系统一般具有监控点分布广、摄像头数量多、监控时间长等特点,采集数据的时间往往长达十几天或几十天。因此应用在视频监控系统中的存储设备在数据读写方式上具有与其他类型系统不同的特点,不同点主要表现在以下几个方面。编码器或采集服务器以流方式写入数据,实时存储监控点的实时图像和画面,存储的文件类型为流媒体文件,因此检索服务器也会以流方式读取已存储的视频文件。数据读写操作的持续时间长。由于摄像头一般都是7×24h工作的,即使采集后视频数据采用分段保存,写入操作的持续时间也有可能长达十几个小时,后期回放时也需要相同的时间。为了保证视频采集过程和回放过程中不会出现丢帧现象,存储系统必须要有足够的带宽。除了数据读写时间长外,由于视频采集过程中,视频文件格式一般都不会发生变化,且码率保持相对恒定,因此视频监控系统的读写操作还具有码率恒定,也就是带宽恒定的特点。视频监控系统对存储的读写方式与传统不同,与数据库系统存储和文件服务器存储采用的小数据块读写或文件传输读写方式有着根本的区别,大数据块、高并发的访问模式对存储系统有新的要求,因此视频监控系统不能采用数据库系统等常用的存储设备。容量巨大,视频监控系统一般具有摄像头数量多,视频图像存储时间长,在高清化的今天,数据量已经出现十几倍的增长,PB级数据量屡见不鲜。因此视频监控系统的存储必须支持超大容量,且容量具有高扩展性,满足长时间大容量视频图像存储的需求。数据量的规模爆发式增长对于存储设备和数据的管理都提出了新的挑战。既能高效存储、灵活调用,又要做到数据安全、统一管理,并且在和多种应用系统复用上和数据分享上也有进一步需求。近年来存储技术高速发展,存储设备价格不断下降,专业存储系统具备了在视频监控行业广泛应用的基础。但是在实际应用中采用何种存储技术和方案还要根据用户的实际情况,包括系统投资数量、系统规模、现有环境等诸多方面考虑
简介:摘要:针对大数据的特点及其对存储系统的海量、融合和高性能的存储需求,提出了一种融合分布式存储系统,该系统基于本地物理存储介质构建统一的分布式存储资源池,采用去中心化的软件定义存储架构,利用多台存储服务器分担存储负荷,提高存储系统性能;通过多副本、纠删码数据保护模式,提高数据可靠性;向上层应用提供文件存储、对象存储、块存储等融合存储服务,提供数据管理效率;系统采用可扩展的方案,实现动态扩展。本文对分布式存储系统的系统架构、寻址方案、读写流程等设计要点进行研究,并给出了测试验证结果。
简介:摘要:经济的发展,促进社会对电力的需求也逐渐增加,这有效地推动了电力企业的发展。供电企业创新型提高安全管理水平是供电企业发展的必然举措。注重电力安全工器具仓储过程管理已成为供电企业实现管理信息化、精益化的新趋势。库存管理信息化可以应用于电力安全工器具管理过程的每个环节,可以对运输、维护和仓储等单个环节进行系统控制,也可以应用于整个电力安全工器具管理过程。同时,可实现电力安全工器具投资、维护、仓储和运输的有效沟通和无缝衔接,构建具有高速高效、低成本优势的电力安全工器具管理链条。因此,信息技术的发展已成为电力安全工器具管理能力与管理体系发展的必然要求。本文就分布式云存储的电力安全工器具管理展开探讨。