大数据时代的意义与挑战

随着互联网的高速发展，许多应用和程序更新频繁，其中变化最大的是互联网行业应用的内容本身发生了根本变化。以往的互联网行业更加注重技术上的创新，如今，随着互联网在人类社会的普及，越来越多的互联网行业不再单纯追求技术上的竞争，而是尽可能借助大量与行业相关的有效数据进行分析调查。

（一）日益丰富的数据产出

现如今各类与互联网相关的电脑或者手机程序都热衷于收集数据，这一切随着互联网的普及以及各行业在互联网的渗入，开始迅猛发展起来。面对数据范围覆盖越来越广，规模越来越大，种类形式层出不穷，结构组分愈加复杂，Hadoop（海杜普）开始面临更大的挑战。虽然其是数据库中十分具有代表性的一大技术，但其理论基础是2006年以前的了，因此许多人开始思考怎样更好地适应这个风云变幻的大数据时代。谷歌公司的可容错扩张型分布式数据库事务机制和全球级分布式数据库就是国际上知名度较高的一项关于数据存储的技术。

（二）数据成为当今社会的宝贵资源

越来越多的企业意识到，数据覆盖越广，规模越庞大，形式种类越多，组分越复杂，这组数据的可利用性就越高。这其中准确可观的数据是相关企业用于发展完善的一大利器，也是现代社会企业竞争中不可或缺的一项宝贵资源。这项资源通过完整的数据链科学分析，运用现今的技术和思维对相关的信息进行提取，可以让企业更好地理解客户需要。但大数据的获取并不是所有企业都能做到。(www.xing528.com)

（三）大数据时代推动了科学技术上的磨合

数据来源于人们生活中的各个方面，如今的大数据时代让这一点变得更加显而易见。随着大数据时代的到来，与其获取、分析等环节相关的新技术接踵而至，如物联网、计算中心、云计算等，促进了各类技术在其他领域中共同进步与磨合。不仅如此，大数据时代对人才也有着更加严苛的标准—必须兼有多个学科专业的知识。

（四）大数据时代下带来新思维模式

面对庞大复杂的数据，如何更快更有效率地普及、整合、提取有价值的信息，是很多互联网企业十分向往的。这对我们的思维也带来了影响。第一，信息的准确性不再是最重要的，其中的覆盖率以及数量规模让信息有了更大的适用性。第二，小数据标本有限，再精准复杂都抵不过大数据最简单的算法，因为大数据包含着更大范围的人们的信息以及想法。第三，大数据作为实践后研究调查的一环，让事实说话具有更大的说服力，因此数据科学家开始替代“专家”。第四，事物之间的联系不再只有单纯的因果，而是涉及很多复杂的相关因素。第五，数据要整体分析，而不是抽样分析，分析后要尽可能提取更有价值的信息。