传统企业如何实施“数据化”转型?听听数之联周涛怎么说

36大数据

作者:周涛

八个步骤让你的企业“数据化”

什么样的企业可以称得上是大数据企业呢?恐怕没有人能够给出一个完美的答案。但是,直观地,我们可能觉得Google更像是一个大数据的企业,阿里巴巴也像是一个大数据的企业,而中国银行似乎不太像一个大数据的企业,尽管它每天也一样浸泡在海量的数据中。除了具有处理大量数据的能力外,之所以Google和阿里巴巴更像大数据的企业,是因为他们有深入的数据分析工具,利用数据分析的结果直接指导决策,而且经常推出基于数据分析的创新型应用,这还不包括类似于AlphaGo这样的奇葩。

这是我第三次以文字的形式谈论如何成为一个大数据企业。一是很早以前在“科学网”上写的一篇博客,二是为一本名为Code Halos的书写的序言。这个版本可以看作是上两个版本的补充和扩充,同时也是本书一些重点内容的重述(为了保证本文的独立性,可以不依赖本书直接阅读,少量书中给出过的文献和注释在本文中重复出现了)。然而遗憾的是,并没有一条放之四海皆准的通往大数据企业的康庄大道,更没有点石成金之术可以让一个企业快速Google化。这篇结束语只是提出一些看得见摸得着的建议,藏在这些建议背后的大数据理念,或许更加重要。

尽管我是用Step1、Step2这样的说法来列举成为大数据企业的措施,但是这些步骤之间并没有严格的逻辑上谁决定谁或者时间上谁先谁后的关系。举个例子来说,最好的办法当然是先有了数据标准再整理采集数据,这样可以不走任何弯路,但实际上完全没有数据,企业不会有动力做标准建设,做出来的标准也可能是纸上谈兵,完全不实用。又比如,数据管理平台的建设能够帮助更好地进行全面数据化,但实际上它多半是全面数据化战略进行了一定程度之后才开始启动建设的。总体来说,写在更前面位置的,是更基础的,但是没有绝对的依赖关系。

Step1 .全面数据化

“数据化”浪潮是整个大数据时代的起点,它强调数据就是资产,记录一切可以记录的数据,一定会在某一天产生巨大的价值。显然,数据化是一个企业能够通过深入数据分析,实现自身优化的基础。

我去长虹集团调研的时候,他们告诉我,长虹电器在自己的生产线上,通过大量传感器,记录生产环境的温度、湿度、粉尘度、振动强度和噪音强度,等等,通过这些量化指标与产品质量的关联分析,得到影响产品优品率和良品率的关键因素,再进一步通过控制环境因素,明显提高了产品的优品率。企业在日常的经营管理过程中,通过办公自动化系统(OA系统),很多内部即时通讯、邮件往来、工作分配和业务文件上传下载等日志数据都被记录下来了。这些数据就是宝贵的财富!正如我在书中第三部分提到的,我们通过对这些数据的分析,能够更精确地预测员工的离职率和升职率,更精确地预测员工和部门的绩效水平,帮助企业员工通过基于关联用户和文本智能匹配快速找到对自己现有业务和客户有参考价值的案例和文件,等等。但是这些提升,都是建立在企业拥有相应数据的基础上。

总的来说,全面数据化要求企业采集并存储企业生产经营中的一切数据,形成企业数据资产的概念。

Step2.整理数据资源,建立数据标准形成管理

很多企业已经有了一些数据储备,或者通过第一步,开始快速积累了一些数据。但是企业管理层,尤其是跨业态拥有多家子公司的集团运营的企业,一般而言,对于自己到底有哪些数据资源是没有清晰认识的,更拿不出一张较完备的数据目录。

企业要做的第一步,就是通过自顶向下的方式,成立数据委员会,在有必要的时候借助外部合作方的帮助,进行全面的数据调研,了解数据资源的整体情况并建立数据资源情况更新的流程和规范。

数据资源最基本的呈现方式是一个数据目录,我认为,企业管理团队至少要掌握整个企业数据的3级目录,而企业的主要技术团队应该掌握到4级目录。但数据资源又不仅仅是数据目录,因为还涉及到每一个数据项的完备性、更新程度、有效性和噪音源等描述。掌握了数据资源后,企业要根据自己业务发展的需求,建立数据标准,使现有数据和未来所有的新增数据都能够在同一个标准下统一管理,避免“信息系统建设越多,未来数据整合越难”的困境。业务中涉及大量数据的企业,尤其是涉及到用户隐私数据、国家安全数据和具有重要商业价值数据的企业,要形成数据全流程管理的规范,因为绝大部分数据隐私和数据安全的事件,都不是从外部由黑客或者敌方特定人员通过技术手段获得的,而是本单位人员蓄意或无意泄露的。数据全流程管理的规范就是要做到企业能够对数据进行分级分权限的管理,随时了解敏感数据存储在哪些服务器和终端设备上,对于敏感数据的任何处理,都能够留下数据日志并打上唯一的数据水印,使任何可能的数据泄露之后,都能够追根溯源知道是哪一位员工在什么时间点在哪一台设备上运用何种权限下载的。对于一些操作过程中出现的风险点,良好的管理规范也能够实时发现,防患于未然。

Step3.建设数据管理平台

用户喜欢...

Nutanix通过Cloudera Enterprise认证,携手打造精简大数据企业云

企业云计算领导者Nutanix今日在2017 .NEXT用户大会(北京站)上宣布,其企业云平台软件已通过Cloudera技术认证计划(...


DataStory品牌新升级 | 数据·洞察·连接,做大数据商业价值缔造者

2009年,DataStory创始人徐亚波博士从北美回到中山大学,创立智能信息处理与云计算实验室,专注海量数据处理以及语义...


Go 在万亿级大数据平台开发中的实战

作者:孙健波 导语 迅猛发展的互联网将我们带入了大数据时代,大数据已经成为发展中不可或缺的力量支撑,大数据...


9月大数据行业跑会指南(持续更新中)

本月共计大数据沙龙活动共计10场,其中北京5场,上海3场,深圳2场。同时也欢迎大家查漏补缺,如果有,请联系我们...


人工智能技术是基于大数据吃饭的?

作者:武汉飔拓科技 我们现在已经迈入了AI与机器人逐渐取代人类工作的年代,在不知不觉间,AI的相关技术已经开始...


「轻易强快」的 Spark on Angel,大数据处理爽到爆!

作者:游遵文 Spark的核心概念是RDD,而RDD的关键特性之一是其不可变性,来规避分布式环境下复杂的各种并行问题。...


大数据+AI促进机器学习

AI和大数据都是目前炙手可热的新兴技术,如果把它们结合在一起,又会怎么样呢?目前,研究人员正在为这一方向而努力,让大数据与AI结合而更好地发展。随着科技的发展,人们逐渐意识...


金融大数据运用与隐私权保护

作者:王燕玲 【导读】:金融大数据的运用有助于提高金融监管能力,重塑金融监管的方式。金融先进技术可以让金...


全球最耀眼的四大明星互联网公司是如何做大数据的?

作者:Bernard Marr 大数据”炙手可热,很多企业都不会错失机会,谷歌已经从一个网页索引发展成为一个实时数据中心...


大数据早报:又一家大数据公司要上市IPO了 Google新算法可自动烤饼干(8.17)

数据早知道,上36dsj看早报! 来源36大数据,作者:奥兰多 『大公司』知名数据库厂商MongoDB提交IPO申请 据外媒报道,...


大数据一点都不遥远,Google、Facebook和亚马逊早对我们进行了启蒙?

如今大数据一词已经变得无处不在。人们在思考通过利用大数据治疗癌症、结束恐怖主义以及饥饿,从而改变这个有...


机器学习如何改变数字化企业的未来

根据《IDC Futurescapes》报告的预测,三分之二的全球2000强企业CEO将把数字化转型作为公司战略的重心。而战略的其中一...


体育大数据所为何?中国体育大数据公司现状揭秘

作者:娃娃 本文为36大数据原创,未经允许严禁转载。 在上一次风口融了资的体育大数据公司都在干嘛呢? 随着共和...


天云大数据CEO雷涛:从BI到AI的演进路径 数据推动规模化AI能力

2017年6月29日,在由数据猿主办的金融科技商业价值探索高峰论坛上,天云大数据CEO雷涛在主论坛上以“Fintech实践:从...


谁是王者?百度、阿里和腾讯的大数据发展路线和区别

作者:麒麟 本文为36大数据原创,禁止转载。 看中国科技企业发展,先看BAT。 三家公司各自占据自己的领域,成为了...


数字化革命的最终归宿是“跨界”!未来将诞生一批数据寡头

作者:白硕 穿透的魔力 今年6月1日,被邀请参加了一个脑洞大开的儿童节活动。通过酒店业一个数字化连锁扩张的活...