不同机构的研究成果都表明,未来数年全球数据总量将会呈指数性增长。大数据概念被提出后多年来一度成为热点词汇。由于数据越来越成为企业的重要竞争方面, 大数据分析也越来越被企业重视。那么大数据的能力你都了解多少? 数据的存储 数据的存储问题是信息系统建设的一个重要问题。数据量小的时候这一问题可能被忽略,但对于超大量数据,高昂的数据存储成本,使低价值密度数据被抛弃。随着技术的驱动,分布式集群、x86的发展,hadoop技术的逐渐成熟,给大数据的存储提供了生存的空间。大数据技术的推动,使数据可以被存储。 数据的处理 如上一条所述,数据被存储下来,但这距离其发挥价值还有很远的路程。过去的数据处理能力效率低却成本高,这严重阻碍了数据价值的发挥。数据意义的体现需要能在有效时间内处理完毕。大数据技术,大规模分布处理技术、spark内存技术的发展使数据处理更加有效。 数据的查询 提升了数据处理能力可以有效缩小数据规模,更高效地处理数据,使其能发挥价值。但是遇到需要直接对超大量数据查询时,传统的存储系统大多无法支持。osql技术、spark、等大数据新技术、新框架出现,让直接查询大数据变得简单,业务发展也更加有效率。
|