最新
推荐
2014年高等教育信息化十大“关... 01-04 教育部成立教育信息化专家组 12-24
我国首次开展全国性教育信息化... 12-22 CERNET第二十一届学术年会 11-24
大数据时代的来临,带给我们众多的冲击,而斯诺登事件的曝光,让全世界人都认识到了数据的重要性。那么,大数据时代将给我们带来哪些变革,IEEE Fellow、香港科技大学教授倪明选在西安交通大学召开的“2014高等教育信息化创新论坛”上发表的主题演讲,就为我们阐述了他所带领的科研团队在数据挖掘方面所做的研究与探索。 全面了解客户行为 倪明选以谷歌为例,向大家解释了谷歌为什么能够全面了解用户行为。他说,谷歌提供的服务十分全面。谷歌每一次功能的更新,界面的优化,精准的搜索,资料备份,免费的超大邮箱,都让大家感觉谷歌的服务太好了。可是世上本无免费的午餐,这一切源自谷歌搜集了用户所有的数据,进行行为分析,以获得巨额的广告商机,而这也切实说明了数据的价值所在。 倪明选强调,他们希望不仅从大数据中发现更多的知识,更重要的是通过数据的搜集与挖掘,从而达到预控的目的。他说,谷歌的服务非常不错,在功能更新和界面友好度上也下了很大功夫,谷歌通过搜集数据,了解客户的行为,从而进行针对性的广告。 此外,谷歌的科学家曾发表过一篇文章,讲述他们曾做过的疾病预防和流感分析。谷歌通过搜索定位,哪些人在什么地区搜索过“流感”这样的关键字,分析出可能发生流感的范围。而美国疾病控制与预防中心从搜集资料到发布流感情况,需要一两周才能得出流感分析结果,谷歌科学家只用了一天,结果跟美国疾病控制与预防中心做得一样好。 进行实验分析 在报告中,倪明选还列举了一些大数据带来的影响。例如,2013年诺贝尔物理学奖获得者希格斯证明了上帝粒子的存在,欧洲科学家们建立了一个超大实验室,每年搜集几个P的数据,大量的数据无法处理,只能再送到十几个一级的实验室。第一级实验室搜集后再送到第二级实验室,把所有的数据再做分析,最终证明了95%的概率上帝粒子是存在的。如果数据量再大一些,基本可以证明上帝粒子100%存在。 倪明选认为,大数据分析有三个最主要的元素:第一,要知道想解决什么问题;第二,数据非常重要,收集各种各样的数据;第三,什么样的技术能从数据中解决问题。如同给你一个矿藏,其中蕴藏着巨大的资源,挖出矿藏是你的本领。 倪明选在计算机科研领域工作超过35年,一直从事网络体系结构研究,2006年起负责国家973计划有关无线传感网络的项目,从而开始进入大数据领域。当时他们做了各种科研实验,搜集了很多数据,还拿到了当时上海交通的数据,上海市所有的士要求安装GPS,所有的士在每30秒到1分钟要经过二级GPRS报告的士什么时间、在什么地点,有没有载人,速度多少。他们就思考这些数据有什么用,能够带来什么好处,能否用的士数据帮助大家选择从A到B的最佳线路。倪明选带领的团队通过拥有的6000多部上海的士数据,最终解决了上海的“热区”(是指拥挤的地方,交通容易堵塞)问题。比如从某地去机场,导航只能给出距离最近的路线或是收费最少的路线,但是导航并不能说清目前的交通状况,了解最优路况的自然是的士司机,所以他们通过的士司机最常走的路线,找到最优路径,最后得出上海在什么时间、什么地方形成热区。
|
版权所有:中国教育和科研计算机网网络中心 CERNIC,CERNET,京ICP备15006448号-16,京网文[2017]10376-1180号
关于假冒中国教育网的声明 | 有任何问题与建议请联络:Webmaster@staff.cernet.com