企业需要三类大数据人才
企业需要三类大数据人才
作者:
来源:《中国计算机报》2013年第39
        要成为数据科学家,必须理解大数据的理念和方法论,并掌握数据分析和挖掘的技能,以从大数据中抽取价值。这些能力需要在实践中锻炼,还可以通过参加相关课程的培训获得提升。
        百度公司是一个典型的大数据公司,公司几乎所有的业务都与大数据密切相关,比如搜索引擎、广告等。在百度公司大数据首席架构师林仕鼎看来,大数据业务的发展需要多种人才,包括数据科学家、数据架构师以及数据工程师等。
        在这里,数据科学家是一种狭义上的定义,指的是那些具有数据分析能力,精通各类算法,直接处理数据的人员。经数据科学家加工和分析后得到的信息可以作为业务处理流程的输入数据,用来驱动业务的发展。
        数据架构师则要精通业务,了解业务的需求和业务系统的架构,这样才可能把数据和业务进行对接。
        还有一类大数据人才是数据工程师,他们具有很强的编程能力特别是系统级编程能力。他们的工作是搭建数据存储、管理以及处理的平台,支撑数据科学家提出的数学模型或算法的运行。
        大数据 大不同
        大数据一定是那些用传统的数据处理技术和方法没法处理、管理和使用的数据。大数据的“4V”特征简而言之,就是需要对多源多样的动态数据做实时的关联分析和挖掘。这也决定了传统的商业智能、数据库技术等已无法发挥其作用。举例来说,传统数据库面对的数据容量通常是TB级,而现在互联网行业需要处理的数据一般都是PB级甚至是EB级。不仅如此,数据的来源正变得多样化,而且不是静态的,这些都给数据的处理带来了新挑战。大数据要求将这些不同来源、不同结构的数据全部结合在一起进行关联分析,并从中提取所需的价值。
        因此,大数据需要全新的大数据处理系统,也需要专业的大数据人才。
        上文提到的数据科学家、数据架构师和数据工程师,其实是一个有机的整体,是有效
处理大数据所不可缺少的专业人才。林仕鼎表示:大数据行业迫切需要这三类人才,而企业也各有分工,有的是大数据技术的建设者,更多的是大数据技术的应用者。企业可以根据自身的定位和需求来选择需要的人才。大数据要学什么

版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系QQ:729038198,我们将在24小时内删除。