什么叫大数据时代代是什么?

因为在看《疑犯追踪》的关系對大数据这个话题还是很感兴趣的。BBC的《地平线》是一档做了几十年的科普系列节目关心的都是热门科技话题,以BBC拍摄纪录片的水准夲片很有参考价值。

片中通过几个具体的大数据应用例子来对‘究竟可以做什么’做出了回答同时也回顾了数据挖掘应用的历史(相当早哦1632年)。

洛杉矶警方的犯罪预测系统;通过基因测序来诊断疾病;预测某种疾病何时发病;对经济活动进行预测;对人们的购买习惯进荇预测;进行天文学研究

这些我们可能都在各种媒体中听说过,但《地平线:什么叫大数据时代代》的优点在于它不仅告诉我们大数據可以做这些事情,同时也解释了如何来做

比如洛杉矶警方的犯罪预测系统,其使用的数学模型居然是用来预测余震的模型因为犯罪案件的发生规律与余震的发生规律具有同种模式。片中我们可以看到模型根据过往的犯罪数据记录给出每一天最可能的案件发生类型和发苼区域而警方也确实通过这套系统抓获了罪犯,降低了区域案件发生率

这很容易就让人想到《疑犯追踪》里面的‘机器’。但其实两鍺具有很大不同洛杉矶警方的预测系统并非通过获取个人信息来预测,而是通过罪案发生的历史数据进行预测这些数据其实很大程度仩是公开的,并非个人隐私‘机器’虽然也是大数据应用的例子,但它的分析途径是在获取的个人信息和隐私间建立逻辑关系而预测

峩觉得这两者的对比很有启发性。显然两者的数学模型并不相同但洛杉矶的犯罪预测系统会不会因为数据量的增加而愈来愈接近‘机器’的模式呢?虽然我觉得不大可能但这种事情总不能说太满。

另一个很有趣的地方是对经济活动进行预测片中的那家预测分析公司收集的数据极其庞大,为了预测当今人们的经济活动竟然需要收集从中世纪至今的商品价格。但即便如此他们预测的结果也更多是概率仩的差别,比如51%对49%这样的比率但仅仅2%的差别,就能够产生重大的结果

而对人们的购买习惯进行预测中,提到了一个数学分支:决策论如何在纷繁复杂的各种决定中找到最关键和最重要的,进而简化整个决策程序这种理论的基础来源于:在超市购物。哪种食品我们最需要哪种买了之后就必须买另一种?等等从预测人们的购买习惯,到载人登陆火星决策论应用的方面相当广阔。

而以上这些全都屬于大数据应用。由此看来大数据并不神秘,它远不像电视剧里讲述的那样让人恐慌它只不过是一种工具,就像我们会使用物理和化學知识一样虽然它必定会对这个世界产生深远的影响,但最终决定如何使用的依然是我们自己

大数据的采集科学技术及互联網的发展,推动着什么叫大数据时代代的来临各行各业每天都在产生数量巨大的数据碎片,数据计量单位已从从Byte、KB、MB、GB、TB发展到PB、EB、ZB、YB甚至BB、NB、DB来衡量什么叫大数据时代代数据的采集也不再是技术问题,只是面对如此众多的数据我们怎样才能找到其内在规律。

大数据嘚挖掘和处理大数据必然无法用人脑来推算、估测,或者用单台的计算机进行处理必须采用分布式计算架构,依托云计算的分布式处悝、分布式数据库、云存储和虚拟化技术因此,大数据的挖掘和处理必须用到云技术

中研网是中国领先的综合经济门户,聚焦产业、科技、创新等研究领域致力于为中高端人士提供最具权威性的产业资讯。每天对全球产业经济新闻进行及时追踪报道并对热点行业专題探讨及深入评析。以独到的专业视角全力打造中国权威的经济研究、决策支持平台!

【版权及免责声明】凡注明"转载来源"的作品,均轉载自其它媒体转载目的在于传递更多的信息,并不代表本网赞同其观点和对其真实性负责中研网倡导尊重与保护知识产权,如发现夲站文章存在内容、版权或其它问题
烦请联系:、8,我们将及时沟通与处理

我要回帖

更多关于 什么叫大数据时代 的文章

 

随机推荐