2004年毕业后,我加入了这家公司。至今已有16个年头,我一直从事数据相关的工作。现在回过头来看,专注于某一领域固然重要,但过度专注于一个领域也会让人陷入舒适区,从而影响进步,并且可能会限制视野。
虽然我一直在数据领域深耕,但我并没有真正担任过架构师或程序员的角色,因此对于DevOps的理解相对浅薄,对云原生的概念也一度一无所知。这些不足之处可能会影响我在未来进行大数据技术创新的能力。
遗憾的是,我的经历相对较少,这也限制了我的视野,影响了我的格局。职业发展的过程中,个人的背景和经验往往会对其产生一定的制约。下面,我将简要分享一下自己在不同职业发展阶段的感悟。
刚开始的时候,我和其他新人一样充满激情。一年时间,我就成长为一名独立的数据提取人员;两年后,我成为了一名报表开发者;之后又成为了需求管理者,最终成为数据仓库项目的经理。这段经历大约持续了五年。
数据提取是数据工作的基础技能,报表制作则教会了我基本的数据展示方法。需求管理提升了我的业务视野和沟通能力。而担任数据仓库项目经理的经历,使我更加全面地理解了数据平台的运作方式,包括ETL、数据建模、数据库、元数据、数据质量管理、数据集市、OLAP以及即席查询等内容。
许多人没有机会尝试多种类型的数据工作,因此对数据技术的理解可能存在局限。然而,仅仅接触多种数据工作并不意味着对数据有深刻的认识。在企业数据的理解方面,我确实投入了不少精力,尽管这只是最基本的工作,只要愿意花时间,大多数人不愿意在这方面下功夫。
实习期间,我仔细研究了企业的所有报表目标,并编写了第一本数据字典。在从事大数据工作后,我又编写了公司首部BOM三域数据字典。我不满足于只掌握数据提取技能,而是深入探究数据仓库的每个细节,经常询问业务系统开发人员关于某些字段的具体含义,以便更好地理解数据的来源和意义。
在职业生涯初期取得的成绩往往依赖于以往的经验积累,但很快就会遇到瓶颈期。回顾从公司加入到第五至第八年的这段时间,我的能力几乎停滞不前。尽管我对未知的知识仍然保持着探索的热情,但由于很多东西我甚至不知道自己不知道,因此很难取得突破。
可以肯定的是,那时我认为自己的表现还不错,但实际上这种自我高估是普遍现象。正如人们往往认为自己的驾驶水平高于平均水平一样,他人往往并不这么认为。更重要的是,职业发展的限制因素不仅仅是技术问题,还包括企业文化等因素。例如,企业在推动数据驱动业务方面的作用不容忽视。如果没有足够的毅力,可能会在遭遇一两次失败后就放弃,进而陷入瓶颈期。当然,如果有优秀的导师指导,则会有很大帮助,但现在我在团队中积极推广导师制度,以弥补这一短板。
据统计,大多数人在职业生涯中只有两三次晋升的机会,而很多人死在了瓶颈期。
2012年,大数据概念开始流行起来,公司也开始尝试利用大数据进行价值运营。由于我在负责运营分析项目的建设,与数据的关系愈发紧密,于是开始接触大数据。没想到这成了我职业生涯中的转折点。
2012年至2013年间,我一直在思考如何引入O域大数据以及如何对O域大数据进行质量稽核。为了实现O域数据的引入,我进行了大量的沟通、调研和汇报工作。有了初步的数据积累后,我开始考虑如何将大数据变现。为此,我研究了许多国外运营商的变现案例,并撰写了许多大数据分析报告。与此同时,我的PPT制作水平也得到了提升。
到了2015年,随着业务和技术的进一步探索,公司认为时机已经成熟,成立了大数据中心。这是一个集商务、产品和数据为一体的综合性部门,公司希望我们能够轻装上阵,专注于大数据价值运营。有了这样的组织保障,我们终于有机会大展身手。
新组织带来了新的挑战和机遇。大数据中心成立后,首要任务就是整合整个公司的数据资源。作为数据负责人,我有机会重建一套企业级的大数据管理体系,这是一次难得的机会。
许多企业之所以难以做好数据管理,往往是因为历史遗留问题太多,而非缺乏能力。每个人都需要一个契机来推动变革。在此期间,我主要完成了以下几个重要事项:
没有经历过完整的平台重构过程,对平台的理解总是有限的。而一个大型项目完成时,通常会有1-2个人脱颖而出,这就是“时势造英雄”。因此,一旦有机会参与公司的重要项目,就要全力以赴,这样才能从外部学到很多东西。
大数据平台建成后,最大的挑战是平台使用率低。此时,公司为了实现数字化转型,启动了智慧运营计划,即以大数据为驱动力、大IT平台为支撑、流程优化和管理完善为保障、提升客户体验和价值创造为目标,推动运营转型。这为我们推广和运营大数据提供了强有力的支持。
在运营过程中,大数据平台的功能不断扩展,数据中台逐渐成形。例如,原本用户体验较差的数据开发管理平台,现在已经成为数据中台的核心部分。
在内部运营如火如荼进行的同时,我也开始了大数据产品的体系建设。
产品是数据价值的最佳出口。所有从事数据工作的人必须深刻理解这一点。以前,有同事抱怨虽然做了99%的数据工作,但最终的成果却不是自己的,感到非常遗憾。这反映出一个问题:如果你只做数据提取,就应该思考是否可以做一些数据分析;如果你只做报表,就应该考虑是否可以开发一些工具或产品。
道理很简单:如果你创造价值的方式是通过个人的努力换取回报,那将是安逸的,难以规模化地创造价值。而如果你能将个人的努力转化为可重复利用的产品,就能实现24/7不间断的价值创造,这就是产品能带来的好处。
我们从事数据工作的人都在寻找价值的出口,希望将数据转化为信息,将信息转化为知识,将知识转化为智慧,最终产生实际价值。但有多少人能够跨越信息到知识这一阶段呢?很少有人能取得突破。
以上就是我的职业历程。可以看出,我的职业路径从数据提取到报表制作,再到数据仓库,再到大数据,最后到产品和变现,可以说并没有明确的职业规划。唯一不变的是保持谦逊、终身学习、把握当下,其他的一切就交给时代和机遇吧。