大数据存储三个管理技术:
1、存储资源管理方法
为了解决集群存储环境下的存储资源管理问题,采用存储资源映射方法通过在物理资源和虚拟存储资源请求之间建立合理的映射关系,来进行有效的存储资源管理。
2、支持多用户的资源使用和存储环境隔离机制
当用户数量增多,有限的存储资源已经不能满足用户对该类资源的需求时,用户与资源的矛盾就会凸显出来。解决这种矛盾的最有效的方法就是采取有效资源共享机制,将有限数量的资源按需求动态共享给多个用户使用。任何单体存储阵列所创建的物理卷的容量都是有限制的,而多个异构的存储系统联合在一起就可以创建出一个更大的逻辑卷。
3、基于Hadoop的大数据存储机制
大数据的各类描述方式的多样性,存在着结构化数据、半结构化数据和非结构化数据需要进行处理。
对于结构化数据,通常的处理方式仍是采用关系型数据知识库进行处理,对于半结构和非结构化的知识,Hadoop框架提供了很好的解决方案。