企业级大数据平台构建:架构与实现

朱凯
推荐序 思者常新,厚积薄发 相比以BAT为引领的互联网公司的天生“数质”(业务高度数字化,技术更具创新性和开放性),大多数传统集团企业经过之前ERP时代积累了海量的业务数据。但是由于业务的复杂性与新老技术升级变革的压力,面对汹涌而来的大数据浪潮,这些企业却依旧停留在探索技术如何稳步更替升级、分散在不同部门的数据如何更有效地集中统一、数据本身以及数据技术如何有效形成企业级治理体系等一系列“知易行难”的问题当中。 相比两年前全民热捧大数据概念的疯狂,数据本身和大数据主流技术显然已经稳步度过了“过高期望的峰值期”和“泡沫化的低谷期”,正式进入“稳步爬升的光明期”。正因为这样,在这个黎明前的时期,传统企业如何平稳完成数字化变革带来的技术架构变迁,找到去伪存真的企业级大数据实战指南就显得尤为重要了。 最近十年,我一直在远光软件从事电力企业信息化相关的工作,组织、带领了包括企业大数据平台、企业新一代敏捷BA平台与能源BDaaS平台在内的研发团队。电力企业在国内正是信息化水平较高,但业务运营和技术管控模式最为复杂的一类企业。正是意识到“生于互联网的大数据技术对于集团企业的大数据应用支撑不足”这一事实,我们很早就开始孵化相关的团队、探索相关的应用。直到我们在公司正式组建第一支“企业大数据产品商业化团队”的时候,本书作者通过“普通社招”成为第一批加入的开发工程师之一。在短短的半年时间内,他就在如何快速学习新技术、实践新架构方面展现出高于常人、高于前辈的能力和素养。 四年的时间,我们的大数据产品EDT、创新数字化平台产品Realinsight相继诞生,我们和用户一起完成了一个又一个企业大数据解决方案实战。用户数屡创新高、嘉奖年年不断,获得了市场和行业的肯定。当年那支由20人组成的产品团队,一年一个台阶发展为如今公司的一级产品事业部,当年那个“普通开发工程师”也当仁不让地成为我们整个大数据产品…