百度写给应届生的99封信—和大数据时代Say Hi

sowang

来源：百度校园    日期：2013-07-29


望远镜帮助人类认知浩瀚的宇宙，探测器让人们可以探究地球深处的奥秘，显微镜帮助我们观测奇妙的微生物，这些能够收集和分析数据的技术帮助人类更好地理解了世界。随着社交网络和移动互联网的发展，数据呈现出的爆炸式增长，过去三年里产生的数据量甚至超越了以往四万年的数据量，大数据成为了现在和未来理解世界、服务人类的新方式。

被誉为“大数据商业应用第一人”的维克托•迈尔•舍恩伯格，是最早洞见大数据时代发展趋势的数据科学家之一，在他撰写的《大数据时代》一书中指出，大数据的核心就是预测，大数据将为人类的生活创造前所未有的可量化的维度，成为新发明和新服务的源泉，更多的改变正蓄势待发。




互联网与大数据互为补给

互联网时代产生了浩瀚的非结构数据，如何洞察获取这些数据宝藏中的价值呢？依靠的是正在迅速发展的人工智能技术，像自然语言处理、模式识别以及机器学习。反过来，新数据的充裕又加速了计算的进展—这就是大数据的良性循环。比方说，机器学习算法就是从数据中学习的，数据越多，机器学得就越多。

以百度搜索为例，百度大数据首席架构师林仕鼎介绍说：“用户输入一个搜索请求，有时一开始我们很难确定在搜索结果页面，以什么样的排序呈现给用户合适。那么，我们就会分别依照一定的算法，制定两个排序方法，并在用户中，随机选5%的用户使用排序方式A，5%用户使用方式B。之后，将海量的对比结果和数据反馈回机器学习平台，去分析、挖掘相关算法的优势，进而制定出更优的排序方式，完善百度搜索系统。这样，会使用户在百度搜索中更好地获得想要的结果。”

做好准备融入大数据时代

Gartner预测大数据将为全球带来440万个IT新岗位和上千万个非IT岗位。巨大的缺口让数据分析人才成为抢手货，但这类人才并不好当。很多数据科学家都拥有高级计算机科学学位，或物理学、生物科学或社会科学等一系列对计算机技能有相当要求的高级学位。数据科学家面对、处理的数据量可高达TB级规模，这就要求了他们必须掌握相当多的专业技能。

那么，大数据人才究竟是哪类人才?在英特尔中国研究院首席工程师吴甘沙看来，大数据最关键的部分是数据分析和挖掘数据价值，要获得这些，就需要对数学、统计学、机器学习等多方面知识的综合掌控。初级的分析人员只能是对数据进行报表、描述性分析，真正高级的数据科学家需要对数据做出预测性的、有价值的分析。

北京航空航天大学教授马帅也赞同复合型人才的说法，他认为，大数据人才既需要懂计算机，也需要懂数学统计、经济，还需要懂业务。其中，真正理解业务、能根据大数据应用需求写出核心算法的人非常少。

除了在学术方面的高要求，适合数据分析的人才最好具备冷静的性格、严谨的态度、创新的精神。同学们，大数据时代有足够让人憧憬的未来，数据科学家的职位也炙手可热，但到达对岸的过程并不容易，你们做好准备和大数据时代Say hi了吗？]