技术前沿您现在的位置:主页 > 技术前沿 >

对大数据的正确认知

发布日期:2018-01-08 17:27

自从提出移动互联网下半场的概念后,大家在谈论每一个行业时,都要提到下半场,包括大数据行业。大数据的概念在这几年,火爆程度不亚于AI、VR等概念。但是,作为一个大数据创业者,在谈大数据的下半场之前,现在互联网界对于大数据这个概念有太多误区。你所知道的大数据的概念,也许都是错误的。我发现身边很多IT人对于这些热门的新技术、新趋势往往趋之若鹜却又很难说的透彻,如果你问他大数据和你有什么关系?估计很少能说出一二三来。究其原因,一是因为大家对新技术有着相同的原始渴求,至少知其然在聊天时不会显得很“土鳖”;二是在工作和生活环境中真正能参与实践大数据的案例实在太少了,所以大家没有必要花时间去知其所以然。因此以下是西安Java培训整理出一些大数据相关方面的知识
  大数据并不是在大,而是有用
  首先,大数据并不在于其大,而在于质量,用通俗的话说就是有用。
  大数据是一个比较泛的概念,大数据其实不是强调数据有多么大,而是有用。有用的数据才能称得上是大数据,有用就包括了规模、质量等各种综合性属性。
  首先,我认为大数据就是互联网发展到现今阶段的一种表象或特征而已,没有必要神话它或对它保持敬畏之心,在以云计算为代表的技术创新大幕的衬托下,这些原本很难收集和使用的数据开始容易被利用起来了,通过各行各业的不断创新,大数据会逐步为人类创造更多的价值。
  所有的数据都必须深度地与业务揉合。换句话说,创业者凭空想象的大数据模式一定都是虚假的。没有做过这个具体业务的人去谈合作,说如何帮到别人,这都是忽悠。
  这个行业里有太多不可描述的事情,靠这个忽悠吃饭的人太多了。大数据领域,精准营销是一个被提及到最多的概念,没有之一,理论是大数据可以支持精准营销。大家都知道大数据需要规模,所有外行人看到的就是,你有这么多数据,所以你这个就是精准营销。但是忽视了一点就是,真正到精准营销前还有一个在中间隔着的,不是规模而是质量,而最终落地在效果。
  所以在大数据行业里,无效数据和数据质量的监测是很重要的,这个我觉得是下半场的核心。它会影响每一家数据公司数据变现的效率,变现效率将会是下半场的赛点。
  在接下来,如何高效地获得有效数据这对创业者的门槛将变得非常高。很多数据服务,比如说统计产品,不是拿到的数据都有效,我认为很多统计产品拿到的数据是无效的,甚至是没有任何商业化的价值。
所以大数据的下半场,争夺的就是商业化效益,其中关键是数据质量的竞争。但想要高质量的数据或者高质量的客户,你就要提供高质量的服务产品,才能完成高效高质的数据积累。高质量的数据依赖高质量的业务,高质量的业务依赖于高质量的产品,三者相辅相成。
  用户隐私问题一直是大数据应用难以绕开的一个问题,如被央视曝光过的分众无线、罗维邓白氏以及网易邮箱都涉及侵犯用户隐私。目前,中国并没有专门的法律法规来界定用户隐私,处理相关问题时多采用其他相关法规条例来解释。但随着民众隐私意识的日益增强,合法合规地获取数据、分析数据和应用数据,是进行大数据分析时必须遵循的原则。
对大数据的认知
  数据是客观的,也是最不客观的
  在理论上来说,数据是最客观的,因为拿到的这些数据,都是通过设备等各种渠道采集的。但同时这也是最不客观的,因为人工可以干预并篡改。
  在中国,纯粹的规模和量级很容易达到,有些人客观达不到,就通过主观的各种手段,哪怕是造假也很容易达到。所以说,数据规模这不是一个特别好衡量的东西,听上去太虚了。到现在为止,还会有些创业者喜欢说,他们覆盖的设备数量,然从十亿到几十亿台,甚至有的人说自己都快上百亿了,我在知乎里提过一个问题:请问中国的运营商一年入网多少台设备啊?大数据创业者太多,设备有些不够用了。
  从腾讯离职,到现在我做大数据这么多年,随着项目的不断发展,对数据的感觉越来越深刻,数据这个东西真的很有意思,如果说它客观,它可能是这个世界上最客观的一个存在。但如果说它虚吧,它也最容易被修改。现在各行各业开口闭口都是数据,但是大家有没有想过,这个数据随时可以被修改。
  这点不方便太展开说,具体原因你懂的。
 
  这个阶段大数据核心不是技术,而是商业化
  大数据创业到现在,决定最终发展的,其实不是大数据的技术,而是大数据的商业化。
  上半场结束了,下半场竞争的是什么,我们确实一直在思考。想来想去恐怕就是商业化了。对数据源来说,不是比谁会忽悠,比的是谁更能赚钱,谁的变现效率更快。
  不仅是大数据,可能各个行业都是这样,现在缺乏真正的商业化。前面竞争已经基本结束,但真正走向商业是一道大坎。15年我在硅谷待了一段时间,见了很多以前在腾讯的兄弟,之前腾讯研究院的兄弟在google研究算法有不少,他研究的课题我看了,确实先进,但要说在技术上高多少也不见得,但是大家所展现的商业思维与探索,跟国内确实有比较大的差距。
   大数据的商业,最后一定是很简单直接的商业模式,越简单直接的商业模式越是一个好商业模式。纸面上的模式、数据等,那没任何意义。实践很重要,我看过太多大数据案例了甚至有些我可以告诉大家都是所谓的专家臆想出来的,相对于纸面上的案例我更喜欢踏实实践的失败例子。
  整个大数据的上半场,大家拼概念、拿融资、收数据源,该拿的都拿了,数据源之争到16年基本上就收官了,格局已经形成。接下去的下半场就真的很残酷了,这拼的真的就是鱼死网破了。那下半场大家拼的是什么?拼的就是边际效应。既然圈了这么多人进来,那就得把这个闭环圆上,不然怎么收场?所以大数据下半场,就是拼变现和效率。创业者能等,投资人等不了。
  大数据行业还有很长的路要走。现在很多时候都是看不清的,硅谷的《奇点来临》说,任何一个新兴行业最终都会有一个曲线。一个新兴的行业的发展一定都是波浪式发展的,一开始是高速发展,发展完之后进入调整期,然后再冲刺。大数据行业也是如此。当它经历低谷之后它会再次成长起来,那这整个行业可能就慢慢开始成熟了。而现在,我们处在离成熟阶段还有比较远的距离。
  小结:采集个人数据应该明确分类,除了国家立法明确要求接受监控的数据外,其它类型数据都由用户自己决定是否被采集。数据的使用将只能由用户进行授权,数据中心可帮助监控个人数据的整个生命周期。