A. 海量数据存储有哪些方式与方法

从数据存储的模式来看,海量存储技术可以分为DAS(Direct Attached Storage,直接附加存储)和网络存储两种,其中网络存储又可以分为NAS(Network Attached storage,网络附加存储)和SAN(Storage Area Net、Work,存储区域网络)。
从数据存储系统的组成上看,无论是DAS、NAS还是SAN,其存储系统都可以分为三个部分:首先是磁盘阵列,它是存储系统的基础,是完成数据存储的基本保证;其次是连接和网络子系统,通过它们实现了一个或多个磁盘阵列与服务器之间的连接;最后是存储管理软件,在系统和应用级上,实现多个服务器共享、防灾等存储管理任务。
如果需要更多资料可以追问

B. 如何运用大数据提升企业管理水平

大数据作为新一代信息技术的代表,己开始在工业设计、研发、制造、销售、服务等环节取得应用,并成为推动互联网与工业融合创新的重要因素。面对大数据浪潮,传统企业需要主动把握大数据发展方向,深入挖掘大数据价值,持续推进管理创新,从而提升企业管理水平。学会大数据思维。在大数据时代,企业管理者和员工要把大数据思维融入企业决策、管理理念、工作方式以及企业文化之中。
首先,要充分信任数据,用数据说话,基于数据去发现问题解决问题。
其次,要以用户为导向。在大数据和互联网高度发达的今天,顾客的需求目益多样化和个性化,企业要充分利用大数据,不断完善产品功能和用户体验,以满足用户的新需求。挖掘大数据价值。大数据专家舍恩伯格说:“ 数据好比一座金山,但是数据在那里放着,这座金山就不会属于你,企业需要做的是了解并挖掘这些‘ 金山’ ,最后成为大数据的赢家。”
目前我国大数据应用还主要局限于互联网企业,传统企业则缺乏数据深度挖掘所需要的人员和技术支撑。当前,传统企业首先要结合自身实际,从战略高度规划和部署,分层次、有计划、循序渐进推动大数据在企业的应用。其次,要充分利用现有设备技术,加强大数据的收集、管理和利用好大数据。促进企业决策更加科学化,管理更加精细化。提升对大数据的分析能力。在大数据时代,企业必须对海量的数据进行准确、快速的分析,以最快的速度为企业管理者提供有价值的信息,这对企业的数据分析能力提出了更高更严的要求。企业要建立一套完整的数据采集、储存、整理和分析体系,加强对大数据技术的开发利用,以充分利用数据这一战略资源。同时,大数据对从业者,尤其是数据分析师也提出了更高的要求。企业要加快大数据人才培养,不断提升对大数据的获取、分析能力。在大数据时代,数据种类更加多样化。
据统计,企业中80%的数据都是非结构化数据。因此,企业不但要重视结构化数据的利用,也要重视非结构化数据的挖掘和利用。加快大数据与工业化的融合。融合是大数据的价值所在,是推动信息化和工业化深度融合的重要体现,也是促进企业转型升级的重要抓手。

C. 海量空间数据管理技术

地理信息系统是采集、管理、分析和显示空间对象数据的计算机系统,它以空间数据为研究对象,因此,空间数据库技术是地理信息系统技术的重要技术之一(黄钊、韦燕飞,2003)。空间数据,特别是栅格数据,一般都具有较大的存储量。因此,研究海量空间数据管理技术,也就成为空间数据库技术的重要内容,也是其难题之一。海量空间数据管理技术,对数字流域、资源规划、电子政务、军事管理等信息化建设都有重要的意义,是其中不可缺少的支撑技术。

随着对地观测技术的飞速发展,快速获取高分辨率遥感影像已不再困难。高分辨率意味着大数据量,对于同一地区不同分辨率的遥感影像,分辨率越高,数据量越大,两者之间并不是简单的线性增加,而是呈指数倍增长(方涛等,1997)。塔里木河流域生态环境动态监测系统所采用的基础数据源就是多种分辨率的遥感影像,包括TM/ETM+、SPOT-5、QUICKBIRD等,原始的基础数据经过融合、镶嵌等处理过程,形成的成果也是影像数据。这些成果资料可以直观地反映出塔里木河流域生态环境的变化情况,也是其他专业应用子系统进行分析的基础。因此,所产生的遥感影像成果应存入综合数据库中,并实现数据的快速查询、调用。此外,塔里木河流域所采集的数字高程模型(DEM)、数字正射影像图(DOM)、数字栅格图(DRG)等基础数据也有着较大的存储量,这些数据都可以归类为栅格结构的数据。因此,海量空间数据管理技术,最重要的就是对遥感影像等栅格结构数据的存储管理。

海量空间数据管理作为地理信息系统技术中的一项内容,说明其不仅需要从数据库技术的角度考虑问题,更多的需要是从地理信息技术角度考虑数据的存储管理。目前,多数GIS软件都可以将遥感影像、矢量数据、DEM、DRG等数据进行套合显示。但随着数据量的增大,很多GIS软件都难以组织、调度、存储与管理这样的海量数据,更没有考虑多数据源、多比例尺、多时相影像数据的统一管理和集成的问题。而塔里木河流域生态环境动态监测系统的建设,又迫切需要高效、快捷地存储与管理这样的影像数据。为满足系统建设的需要,除了采用先进的GIS基础软件平台作为管理平台外,还需要采取一种新的技术方式来管理、分发这些海量数据,以适应各部门的快速浏览和管理需要。通过“影像金字塔”技术可以大大减少磁盘I/O数量,提高系统查询响应速度,实现对影像数据的高效存储管理。

塔里木河流域综合数据库系统对遥感影像、数字高程模型(DEM)、数字正射影像图(DOM)、数字栅格图(DRG)等栅格数据,均建立了独立的存储表空间。为了获得高效率的存取速度,在数据的组织上使用了金字塔数据结构和网格分块数据结构(朱雷等,2006);对影像数据进行了压缩,以缩短数据抽取时间。以高分辨率为底层,通过逐级抽取数据,建立不同分辨率的影像数据金字塔结构,逐级形成较低分辨率的遥感影像数据,在数据查询检索时,调用合适级别的遥感影像数据,以提高浏览和显示速度。这种方法通常会增加20%左右的存储空间,但却可以提高影像数据的显示速度。