注册 登录  
 加关注
   显示下一条  |  关闭
温馨提示!由于新浪微博认证机制调整,您的新浪微博帐号绑定已过期,请重新绑定!立即重新绑定新浪微博》  |  关闭

绍兴顾鹏程的文学梦想

用文字改变命运,用文字感恩人生!

 
 
 

日志

 
 

大数据的弄潮儿  

2016-12-29 07:26:11|  分类: 默认分类 |  标签: |举报 |字号 订阅

  下载LOFTER 我的照片书  |

   大数据的弄潮儿 - 马路天使 - 绍兴顾鹏程的文学梦想

       强大的百度搜索引擎离不开其强大的数据处理能力的支撑,而让百度具有这种能力的,正是像沈志勇这样的科学家。 这位从柯桥区走向全球顶尖大数据实验室的绍兴人,对大数据时代下的绍兴经济发展提出了自己的看法。 

         百度的大数据科学家

  百度在中国的知名度,就像鲁迅之于绍兴,几乎每个绍兴人介绍绍兴时都会提及鲁迅,几乎每个会上网的中国人都用百度搜索过东西。强大的百度搜索引擎离不开其强大的数据处理能力的支撑,而让百度具有这种能力的,正是像沈志勇这样的科学家。大数据时代,百度所向披靡,沈志勇就是其幕后的弄潮儿。一问才知,这位毕业于北大数学学院概率统计学专业,后又在中科院软件所获得博士学位的年轻科学家,竟是地地道道的绍兴人,出生于原绍兴县皇甫乡(现属柯桥区孙端镇)。

    大数据的弄潮儿 - 马路天使 - 绍兴顾鹏程的文学梦想

          这里的一个江南小村皇甫庄村,在鲁迅笔下装载了满满的故乡风情,因是鲁迅外婆家所在地而为世人所知。然而沈志勇仅待了一年便随父母到了东湖镇,在东湖镇中读完初中,考上绍兴一中。三年后,学霸沈志勇来到北大,从此一头扎进“数据堆”,在大数据领域做研究,一发而不可收拾。他曾任惠普中国研究院研究员,研究领域包括机器学习与数据挖掘,随后又进入百度研究院大数据实验室,成为一名数据科学家,负责大数据行业的应用探究,他同时还是大数据分析技术国家工程实验室成员,以及联合国百度大数据联合实验室决策委员会成员。

  沈志勇现在的办公地位于北京百度科技园,接受采访时,他正好在上海出差。“我的工作是将百度的数据及数据技术应用在互联网以外的行业,比如金融业、医疗业以及工业领域等,所以经常在全国各地跑,商谈合作。”沈志勇的工作行程安排得很满,他的生活轨迹便是不断赶路,“赶飞机,赶会议,避堵”,他在微信朋友圈这样调侃自己。走在高楼林立的上海市中心的道路上,被快速流转的时空笼罩其中,周边的一切都似数据堆砌而成。大数据时代让这位37岁的青年博士感觉到无限的想象空间,而他要做的,就是去戳破这一个个幻象的数据气泡,让它们变成现实的可能。

  大数据是怎么回事

  大数据的弄潮儿 - 马路天使 - 绍兴顾鹏程的文学梦想

         与许多搞研究的理科生一样,沈志勇在表述一个概念或讲解一件事物时,思维非常具有逻辑性,且用词严谨。然而,或许是北大人特有的人文情怀造就的思维素养和与生俱来的活泼个性,又使他的言谈充满了亲和力和想象力。“我们都在说大数据,但大数据到底是怎么回事,我们用它做什么?”沈志勇说,首先要搞清楚一个问题,即科学为何成为科学?

  “因为眼睛看不到太远,所以人们就凭光电信号,去探测遥远的外太空发生了什么,于是有了天文学;因为肉眼看不见微小分子而必须借助实验仪器来宏观地表达它们的世界,于是就有了分子生物学;现代人处于信息爆炸的时代,因为人脑处理不了那么多信息,于是就让机器来帮助采集、归纳信息,从而成为人做决策的依据,这就是大数据科学。”大数据时代来临的过程,其实就是信息化以后的必然过程,信息化在很多行业已经达成,但我们现在想做的其实是智能化,而大数据说到底是一种思维方式。沈志勇说,大数据研究者考虑的是怎样把多年积累的技术,通过某种方式开放出来,以成为撬动整个行业大数据应用的驱动力。

  大数据的弄潮儿 - 马路天使 - 绍兴顾鹏程的文学梦想

        “以百度为例,百度最主要的产品就是搜索引擎,现在已经提出百度大数据引擎的概念。最底层叫做开放云,其实就是数据中心,负责存储和计算;再上一层叫数据工厂,相当于数据仓库,可支持查询,还有ETL(解释)的基本操作;最上层就是智能分析层,叫做百度大脑。”沈志勇说,如果大数据引擎指的是百度大数据能力,那么百度大脑就是百度大数据智能分析技术。通过大数据智能分析,以发展用户体验、实现商业变现、制定决策系统等,而智能分析技术,便是沈志勇所要做的研究,也就是顶层设计。

  沈志勇把大数据应用的过程比作采金子,采金子首先要探矿,为了定位金子,这相当于数据调研,确定有价值的信息;其次是采矿、运输,相当于数据ETL,就是对数据进行结构化、规范化、建模输入;之后是冶炼,产出金锭,考验工艺,相当于数据建模,需要较高的技术含量;最后是精加工,即做成首饰并美化,相当于形成最终的产品或用户体验。

  大数据的弄潮儿 - 马路天使 - 绍兴顾鹏程的文学梦想

        在信息化社会,人们感知世界的方式可以通过搜索等手段转化成数据,但由于条件所限,很多公司自己做不了大数据,正是看到了这一点,百度作为国内最早进行大数据技术研究的公司之一,是大数据技术领域“先富起来的人”,希望通过“先富带动后富”与整个产业界实现在大数据上的“共同富裕”。这是沈志勇在百度的使命,也是他作为一名大数据研究者的社会使命。

  预测到底靠不靠谱

  与大数据相关的话题中,人们最感兴趣的莫过于预测,有人甚至称之为大数据的魔力。说到预测,又让人不免联想到隶属于中国传统文化的民间活动——算命。“算命,其实是挺大数据的一件事,它的逻辑与大数据差不多是一致的。”沈志勇又开始运用他那富有严密逻辑的头脑分析起来。“算命虽然有它自成体系的一套推算,但也是要观察对象,找寻出其中的规律,而这需要一定的经验,看得多了,信息收集就多,也越能找到规律,然后再做一个包装,也就是我们说的产品设计,赋予它自身神秘感。”

  大数据的弄潮儿 - 马路天使 - 绍兴顾鹏程的文学梦想

         而大数据预测其实是一项很难的工作,沈志勇坦言,它可以分三种情况。第一种,别人怎么说,我们就怎么说,也就是遵循大多数人的意见;第二种,是根据历史数据得出规律,比如我们完全可以预测半年以后的气温肯定比现在高,因为这已成为规律;第三,便是从机理上来研究,以掌握其规律,作出预测,这需要一定的技术。

  “百度曾做过旅游项目的大数据预测,旅游管理机构和旅游目的地企业都渴望做到对未来‘心中有数’,所以需要预测人流量,这也是旅游行业的一大难题。”沈志勇介绍说,百度旅游预测基于百度大数据的预测模型。一方面,百度通过其LBS(地图)产品反映了全国所有景区的历史人流数据;另一方面,从百度的搜索日志中,得知用户想去的任何景点旅游的需求数据,以及该地在近期将举办的大型活动、民俗集会等相关信息,还可以获取对应时间下的天气、空气质量等数据。这些数据通常是按照时间排列的一系列数值,这些因素对目标数值影响的效果在我们采用的模型中被量化、系统化,进而可以预测将来。

  大数据的弄潮儿 - 马路天使 - 绍兴顾鹏程的文学梦想

         另一个案例是世界杯预测。在2014年世界杯比赛中,包括高盛、微软、Google在内的公司对比赛进行了基于大数据分析的预测,结果百度的预测是最准确的。“这个预测其实依据的是博彩公司(赌球公司)的数据,他们做过广泛的调研,微软使用了一家博彩公司的数据做分析,而我们分析了200多家博彩公司的数据。”沈志勇笑说,这是对群体智慧利用的结果。

  大数据时代下的绍兴

  在北京,有一群像沈志勇这样的高层次绍兴青年,他们都是北京绍兴青年联谊会的成员。尽管相隔千里,但绍兴的一举一动,都会触动他们的神经,当聚在一起聊天时,也自然而然会说起家乡。沈志勇只有在节假日会回绍探亲,说起是否与绍兴方面有合作,他略微尴尬地说:没有。一方面是大数据时代迈着大步到来,一方面绍兴的传统行业正面临困顿,高科技企业还处于“孵化”状态。沈志勇看在眼里,但就像隔岸观花,对岸的花缺水缺肥了,他却不能做什么。

  大数据的弄潮儿 - 马路天使 - 绍兴顾鹏程的文学梦想

        “绍兴目前的院校及相关机构,科研能力不强,只能支持简单的开发,数据密集型的科研项目对个人素质的要求很高,需要高层次IT人才,绍兴目前还没有院校能够培养这类人才。”沈志勇说话一针见血,他认为引进人才是当务之急。虽然目前绍兴已加大招才引才力度,但与周边城市,甚至与全国城市横向比较,还是略微偏弱。大数据时代不可避免地将有一场人才争夺战,政府要引起重视,制定出切实有效并有足够吸引高层次人才的政策。

  谈到绍兴可能落地的大数据项目时,沈志勇认为智慧城市相关的话题可能会引起政府的兴趣,他个人较感兴趣的是智慧社区和零售行业的大数据参与。以商场为例,商场需要对顾客进行追踪,以便知道他们的购买行为轨迹,再进一步,商场更想知道它周围的居民脑子里在想什么,通过大数据的分析,能指导商场的制定相应的营销方案,甚至为顾客提供一对一服务。“这就是我们所说的运用大数据的精准销售,不光在零售业,其实对于纺织业等各行业都可以实施。”沈志勇说,现在绍兴的面料商非常依赖展会接洽业务,但搞展会一年也就那么几次,频率很低,若运用互联网+大数据营销,就能产生新的利润增长点。

  大数据的弄潮儿 - 马路天使 - 绍兴顾鹏程的文学梦想

        另外,工业大数据也是绍兴企业转型升级可以借助的有力武器。利用工业大数据,就是将生产线高度信息化,在生产过程中,信息能够及时传感、反馈,这就使产品质量得到很好的监控,生产设备在运行时的故障预警,也方便技术人员提前采取措施,以避免不必要的损失。在一些从事有关大数据研究或应用的专家眼里,大数据时代充满机遇,也让只是“靠天吃饭”或过分保守的企业如履薄冰。大浪淘沙,谁又将成为依托大数据平台创新发展模式下的新枭雄

        乡贤名片

  中科院软件所博士、百度研究院大数据实验室科学家、大数据分析技术国家工程实验室成员、联合国百度大数据联合实验室决策委员会成员。

  评论这张
 
阅读(11)| 评论(0)
推荐 转载

历史上的今天

在LOFTER的更多文章

评论

<#--最新日志,群博日志--> <#--推荐日志--> <#--引用记录--> <#--博主推荐--> <#--随机阅读--> <#--首页推荐--> <#--历史上的今天--> <#--被推荐日志--> <#--上一篇,下一篇--> <#-- 热度 --> <#-- 网易新闻广告 --> <#--右边模块结构--> <#--评论模块结构--> <#--引用模块结构--> <#--博主发起的投票-->
 
 
 
 
 
 
 
 
 
 
 
 
 
 

页脚

网易公司版权所有 ©1997-2017