大数据智能核心技术入门
杜圣东
作者介绍
杜圣东,西南交通大学信息科学与技术学院(人工智能研究院)讲师,大数据与人工智能方向在职博士,硕土与本科毕业于重庆大学计算机学院。兼任多家单位技术顾问和大数据培训专家,曾为中国中车集团、广州地铁集团、成都铁路局等多家企事业单位做大数据和人工智能培训讲座。首次提出了敏捷大数据方法论,在数据挖掘、商业智能、机器学习和交通、政务、医疗大数据等领域有10余年的系统研发、管理与咨询经验。迄今为止,主研国家自然科学基金和国家重点研发计划项目4项、主持企业课题和产品研发20余项,获得专利和软件著作权6项,发表论文10余篇。 自序
我们所生活的世界,就像一片数据混沌(Data Chaos),大数据爆炸式增长并以惊人的速度进行传播,社交网络的实时性打破了数据发布的时空限制,信息流动的速度、广度和深度让传统管理决策模式面临挑战,还有科技高速发展所带来的冲击都在加大未来的不确定性。如何从数据混沌中发现规律,成为预测未来的“先知”,是历代人类的梦想。不管是古人的占卜,前几年的专家系统、数据挖掘、商业智能,还是当下的机器学习、人工智能、深度学习等技术应用,都源于降低未来的不确定性这一本源需求。软件在加速吞噬物理世界,大数据在淹没我们有限的大脑认知,而大部分人对其技术原理和特性却知之甚少。我们寄希望于大数据智能技术这根“救命稻草”,帮助我们面向过去,发现数据规律,归纳已知;面向未来,学习数据趋势,预测未知,从而提升对事物的理解和决策处置能力。然而,要达到这一目标并不容易,人工智能发展60年,进展缓慢,直到现在才出现些许曙光。
DT(Data Technology)时代,大数据驱动的人工智能技术生逢其时,从战胜人类顶尖棋手、帮助发现引力波到自动驾驶、精准医疗、安全防控等,就像望远镜改变了我们对宇宙的看法,显微镜改变了我们对微观世界的认知,而通过大数据智能技术来解构我们亲手塑造的数字世界,代…