新闻详情

在这个大数据时代下,你应该具备的大数据思维

发表时间:2019-03-26 10:55


我们在思考问题时,当尽量避免因为自己的无知,提出一些低级的问题来。




我经常会被一些低级的问题,搞得没了耐心。比如:


为什么好学历的人,最后都很平庸?

为什么我这么努力,还不如别人随随便便做点事?

为什么学区房那么值钱,但学历不值钱?

为什么一个哈佛毕业的,收入还干不过咪蒙?

上面这些问题,在很多场合都引起了广泛讨论。比如学区房和学历那个,不少人找了一堆理由来解释。但在我眼里,它们都是很低级的问题。

为什么?

因为它们都包含了极其低级的,不符合大数据常识的错误。


01样本不足


人们习惯通过很少的观察值,就得出结论。这样的结论,往往就存在样本不足导致的偏差。


比如,几个清北毕业的人,上知乎回答了个问题,说自己清北毕业,也买不起学区房,甚至也在北京留不下来,于是就有人得出结论:


清北的学历不如学区房值钱!


说清北毕业买不起房的,也只是发声的少数人,而那些闷声发大财的清北人,看到这样的结论,恐怕只会默默地骂一句SB。


02无关性


混淆相关和因果,不能建立多元相关思维模型,简直是人们犯蠢的重灾区!


比如暴饮暴食导致胃痛,就是一种因果关系。吃太多胃承受不了,必然会痛。胃之所以会痛,就是因为你吃了太多东西进去(控制其他变量的前提下)。


但名校毕业和赚很多钱,这就不是因果关系。这只是一种相关关系,而且是一种多元的相关关系。


换句话说,赚钱这个事实,不仅和学校学历相关,还和很多其他因素相关,比如长相、行业、冒险精神等等。


03没控制变量


控制变量的意思是,控制了这个因素,来看其他因素对事物发生的影响。最直观的表达就是 “假设其他条件不变的情况下”,这种假设,就是很典型的一种控制变量的假设。


回到我们之前讨论的名校毕业挣钱不多的问题,名校毕业照样买不起学区房,很多人据此得出结论:


名校也没什么卵用,甚至上大学也没什么卵用,照样买不起房,还不如王小二开个煎饼摊子挣得多。


这个推理最大的问题就是控制变量的不可比。


你在对比名校毕业生和开早餐铺子的王小二时,隐含了一个极为重要的有关控制变量的假设:


除去学历这个因素,其他条件都是一样,且不变的。


但很显然,一个清北毕业生和没上过大学的王小二,除去学历的不同,在其他方面,也就是控制变量方面,也存在巨大的差异!


换个思路,不用横向对比,纵向来看,假设其他条件不变的情况下,一个清北毕业生,没有清北的学历,他会过得更好还是更惨?



除了以上三点,还有很多。比如假设检验,样本和母体的关系,统计一类和二类错误,置信水平等等。

在这个时代下,这就是为什么你必须要具备大数据思维,这样你才能完美避免这些没营养的问题。


大数据的意义就是让事情可度量、客观,数据维度清晰的描绘了事实,也更具说服力。


那么大数据时代给我们的生活带来了哪些便利与好处呢?


01

大数据让人更加聪明更智慧


人的智慧是无穷的,但是人的计算能力和记忆力是有上限的。就拿《王者荣耀》来说,你知道哪个英雄的胜率最高吗?有人会回答是武则天,也有人回答是诸葛亮,更有人回答是亚瑟,但是通过后台统计分析了广大玩家数以万计的数据来看,2017年6月的最新数据,《王者荣耀》胜率最高的前3英雄分别为牛魔、蔡文姬和宫本武藏。根据官方提供的这份数据,用户可以做出最优的选择,更有效率的上王者。


大数据一个很大的功能是“预测”,而预测的基础是历史、现在以及相关的数据(比如说天气)。让事务可提前预测,从而可以做出最优选择和部署复杂情况的应对方案,这是大数据的智慧之处。



02

大数据思维可以助你发现隐形需求


2012年2月27日,淘宝网数据盛典公布了2011年一系列消费数据。通过对网购人群的消费习惯进行分析,预测2012年的流行趋势,以地图的形式展现中国不同地区的消费偏好,其中新疆网友最爱网购比基尼。


那么这个数据是不是说明新疆地区比基尼的消费人群大于其他地区呢?可是新疆都没有海,大家穿着比基尼,该去哪里好?事实上不是新疆爱穿比基尼的人群基数大,而是新疆卖比基尼的实体店太少,所以只能网购了。



03

节约时间,更有效率


快递、外卖和共享单车,这些APP的后台都有一张“大数据”。快递后台会根据数百亿历史地址去做预测,用大数据算法来做智能分单取代了原来的人工分单,最大程度地优化路线,降低人工配单时间,还能减少错误操作,节省人力成本。快递只是整个物流领域里漏出的一只角,大数据技术可以帮助全部环节的物流供给与需求匹配,优化资源配给,另外,根据消费者习惯偏好,大数据可提前预测消费者需求,将商品物流环境和客户的需求同步,提前计算出运输路线和配送路线,缓解物流压力,提高用户满意度。


需求匹配这一点非常重要,就近收取和派送快递,就近送餐,就近扫描二维码解锁共享单车,节省了我们盲目地一个一个去找的时间,其实也让提供生活服务的人节约工作时间,让工作更加有效率。对企业而言,也意味更少的意外和更低的人力成本。



01

大数据思维可以帮你省钱


都说会花钱的人才会赚钱。事实上,会大数据思维的人,首先学会的是省钱。同样的商品,在互联网不同的电商平台有着不同的价格;同样飞往洛杉矶的机票,不同的组合,不同的航空公司,不同的转机方案,所花费的钱也有所不同。我们常常能够看到的“比价网”背后运用的就是大数据原理。


会省钱过日子的妈妈婶婶们都爱记账,我们可以把记账的过程叫做“数据收集”。每个月回顾上个月的家庭开支,你会发现自己的每一笔钱是如何花出去的,同时也能知道哪个方面的钱花太多或者花得不值当,这个过程可以理解为数据的积累(存储)与计算。




在大数据时代,特别是万物互联的时代,人类获得数据的能力远远超过大家的想象,人类取得数据、对数据进行重新处理以及处理的速度也远远超过大家的想象。不管是AI(人工智能)也好,MI(机器智能)也好,我们对世界的认识将会提升到一个新的高度。2018年将是令人振奋的一年,我称之为智能年。我们在深度学习中的突破将慢慢地把我们引向通用人工智能,结合对话式人工智能的智能应用程序将改变我们如何与组织的互动。那些组织开始通过数据洞察赋予员工权力,并使用大数据自助服务解决方案将来改善自我,这将是一个激动人心并且智能的一年。



分享到: