4月8日上午,清华—青岛大数据工程研究中心启动仪式暨大数据产业发展高峰会在青岛市市级机关会议中心举行。“清华—青岛大数据工程研究中心”和“青岛市大数据与智慧城市应用研究中心”正式揭牌,双双落户青岛高新区。
大数据是如何而来,又将面临哪些挑战?大数据又能为青岛在工业建设、智慧城市建设等方面提供哪些助力?青岛建设大数据中心目前成就如何?记者为您详细解读。
现场
青岛开启大数据时代
4月8日上午9:00,清华—青岛大数据工程研究中心启动仪式暨大数据产业发展高峰会在青岛市市级机关会议中心举行。“清华—青岛大数据工程研究中心”和“青岛市大数据与智慧城市应用研究中心”正式揭牌,双双落户青岛高新区。
本次活动以“青岛开启大数据时代”为主题,邀请了清华大学数据科学研究院首席科学家,国家973首席科学家,清华大学计算机系副主任朱文武等资深专家就金融大数据、产业大数据以及智慧城市与智慧生活等方面,开展了研讨。
此次活动标志着青岛市的发展将开启大数据时代的新篇章,并引发全民共同思考:在经济的新常态下,如何以大数据应用引领全市的智慧生活与智能制造,创造出更多的“青岛应用”与“青岛模式”。
清华大学副校长杨斌介绍,青岛将成为国内另外一个推动大数据产业发展很积极的一个城市 ,激励清华和青岛迈上新的台阶。“清华已经有210名研究生修读大数据课程,将来他们会以大数据方向的工程硕士,或者是管理硕士毕业,走向工作岗位。目前掌握的情况看,就是这样的人才供不应求。”杨斌说。
杨斌介绍,大数据的各个方面的产业发展都有需求。青岛不仅有优势的消费大数据、金融大数据,还有得天独厚的海洋大数据,下一步将探讨怎么样让大数据的概念在青岛做得更实,服务于经济和社会发展,“例如蓝色经济在互联网的基础上怎么样发展。”
据了解,本次活动由青岛市政府和清华大学主办,青岛高新区与清华大数据产业联合会共同承办。清华大学数据科学研究院 、清华大数据产业联合会和青岛市政府有关部门,中央、省驻青机构,市直企、事业单位及青岛市大数据相关企业的代表参加了此次活动。
啥是大数据?咋处理?有啥难?
据朱文武介绍,现在处于人机物的时代,一方面无所不在的计算成为可能。另一方面设备的小型化,带来了设备的无所不在。设备的无所不在、网络的无所不在、计算的无所不在,导致了数据产生的速度发生了爆炸性的增长。
据介绍,大数据一部分来自网络世界,一部分是物理世界,一部分来自于人。互联网将人与设备联系起来,从而记录人类在虚拟世界的很多数据,例如每天百度会产生300PB的数据要处理 ,脸书有10亿用户。同时,物联网则通过各种各样的传感器、湿度、温度,记录物理世界的发展。
朱文武预计,随着互联网 、物联网和社交网络的发展,预计到2020年将有40ZB的数据可供记录。
大数据时代到来也会带来很多挑战,包括数据量巨大和处理及时有效性、真实性等问题。
据介绍,数据量非常大、种类非常多。“数据里面有语音、文本、图片、视频等等,给处理带来了很多挑战。并且数据的变化很快,如何保证及时有效性、真实性?”此外,数据真实性和可靠性也是一个挑战。在互联网里面,数据如果不真实,将导致分析走向错误的方面。
此外,还有系统方面的挑战,怎么样联合优化存储;还有计算,还有网络通讯,产生新的大数据的系统,这也是一个学术界大家讨论的一个问题。
“为什么大数据是一个挑战,实际上是因为绝大多数的数据是没用的,要在这些数据里面大海捞针,把有用的东西找出来,找的时候你把数据都要放进来,所以在大数据的应用里面,一个很大的问题就是怎样把数据进行非常有效的采集存储,即使有些数据无用、无效,或者是不真实,也要能够及时地存入,以后慢慢消化,这就是我们的工作解决的一个技术难题。”微软亚洲研究院院长刘震说。
便民应用、工程问题、日常生活都与它相关
开发各类便民应用
微软亚洲研究院院长刘震认为,大数据对正在建设智慧城市的青岛来说,最大助力就是提供了以数据为驱动来进行决策的方式。
刘震认为,城市就是一个大数据,在大数据时代管理一个城市,就是把数据有效地利用起来。利用前提就是采集,在各行各业包括空气质量检测、食品安全、旅游景点等,都是采集来源,再处理后可提高服务质量。
刘震表示,以美国数据分析为例,工业数据、政府数据最多。政府数据完全可以无条件无权限地开放给各行各业,开放给市民。基于这些数据,可以开发各种应用。
“比如,下雪了,可以利用应用问一下,小孩的皇家线上官网(中国)有限公司是不是关门?能够马上获得回复,今天皇家线上官网(中国)有限公司关门。”刘震举例说,“答案从哪儿来呢?一个根据你所在位置,另一个则根据相应网站公开数据皇家线上官网(中国)有限公司是否开门。”
“有了大数据以后,看怎么样在分析的时候,能够跨领域,把不同领域的数据关联起来,得到新的价值,这是新的趋势和要求。”刘震说。
以前段时间发生的踩踏事件为例,采用大数据处理的话就可以避免。刘震举例说,假设有一个智能旅游的应用,可以看各个景点的人数。再有一个应用是紧急事故处理,根据不同的标准,根据一个地方规定人的密度是多少等硬性指标。假如能够结合起来,把智慧旅游和紧急事故处理的应用结合起来,就可以产生预警等。智慧城市就是通过及时的事态的感应和跨领域的分析,可以能够建立起来的。“在分析数据上,每投入1美元,可收获10.66美元的回报。”刘震说。对此,记者也转算了下,发现相当于投入1块钱回报11块钱。
解决复杂工程设备中隐藏的问题
在大数据采集来源中,工业数据占有很大一部分。而青岛作为一个工业发达城市,大数据的应用将在工业生产中带来不少益处。
清华大学数据科学院副院长软件学院党委书记兼副院长王建民表示,今天产品的设计、制造、维护和再利用,已经不仅仅是在一个企业,而是一个产业链。以小米为例,大数据可以让更多市民参与产品设计。目前,青岛不少制造企业,大量的机器换人,机器换人有什么样的好处?能够采集更多的数据。而在数据分析基础上可以提高效率,可以保证产品质量。
王建民举例,大数据为复杂装备的故障分析提供新的手段,以工程器械中的油缸为例,如果主油缸泄露了,将造成泵车打泵很慢。如果油缸内泄,维修工现场无法判断,而通过数据分析就能找到毛病。王建民揭秘,通过大量故障车辆的数据统计,然后再看车和工况有什么样的特点,就能知道和什么样的毛病紧密相关。
分析我们的日常行为
清华大学皇家线上官网(中国)有限公司与传播学院教授,博士生导师沈阳分析,手机作为移动终端就可以搜集数据,而这也是媒体大数据的核心。据沈阳介绍,如果手机里面有一个分析软件,就可以知道你在聊什么,喜欢什么,甚至朋友是谁。如果再有一个智能手环,手机也可以知道持有人身体状况。
移动互联网改变了整个舆论生态,甚至包括我们的日常行为,例如2015年央视春晚摇红包,当所有人在使用手机的时候,大数据可以把每一个受众的情况给挖掘出来,比如在春节期间包红包的额度代表经济地位。
对于自媒体,沈阳举例,有一个草根分享自己成为大V过程,花了一个月的时间,然后每天花十几个小时到大V上面发评论,然后跟这个人聊天 ,然后向他推荐自己的账号,一个月有500粉丝,现在有一万粉丝,公号的粉丝达到了4万。“所以我们可以得出这样一个结论,500铁粉就足以扫天下。”沈阳说。
青岛还有哪些大数据项目?
2014年下半年,青岛—惠普软件全球大数据应用研究及产业示范基地正式落户青岛灵山湾影视文化产业区,总投资额约220亿元人民币。
目前,青岛—惠普软件全球大数据应用研究及产业示范基地项目概念性规划正在抓紧编制,并将于近期组织评审。项目规划有蓝色智慧港、核心商务区、智慧生态谷和文化创意区,将主要建设全球大数据应用研究中心、大数据处理中心、大数据测试中心、全球战略伙伴智慧产业实验区等研发机构。
2013年,我国北方最大的数据中心——联通青岛云计算中心项目建成并投入使用,这项投资5亿元的IT大项目将使青岛的服务器承载能力增加一倍多,达到10万台的规模,使青岛一举进入全国一流城市行列。除了运营的联通青岛云计算中心拥有6万台服务器外,秦岭路和辽阳路两个IDC中心的服务器规模约为4万台,这三个IDC中心将形成未来青岛IDC的主框架,并将青岛出口带宽从600G 扩容到1000G,使青岛确立了在全国,特别是我国北方的数据中心地位。
背景
青岛大数据方面有啥优势
清华校友会TMT协会秘书长,中关村股权投资协会创业互联网分会会长,前海厚德孵化器董事长邓永强认为,大数据归根到底要变成实际,变成产业,变成人才的价值。
邓永强分析 ,智能硬件是青岛的优势。青岛是一个工业发达城市,因为工业制造,良好的医疗 、健康、设备这种基础,青岛有很好的工业设计产业园,有工业设计的基础。如果能把这种工业制造水平跟大数据紧密结合起来,也是青岛进一步发展和腾飞的基础。
“下一步青岛依托工业设计,依托工业制造,在智能硬件领域也会有很好的突破。”邓永强说,“届时将实现南深圳,北青岛。”
不过,邓永强也坦承,青岛目前在大数据方面存在一些不足。邓永强认为,不管在北京还是深圳还是青岛,都有大数据方面的需求。经过20多年的发展,资本市场已经蓬勃发展,目前青岛有一个蓝海的板块,将对创业投资有一个很好的引导。青岛虽然跟北京、上海、深圳有距离,但是完全可以发挥本地的优势,在某些领域有所突破甚至超过北京深圳。邓永强还表示,青岛的这种创业气氛,创业人才不如北上广深,要做很多的引导和工作。
而刘震建议,青岛可以在数据开放上提前走一步,目前北京、上海等城市已经开始做数据开放了,但开放的程度和量还是有限的。很多城市都是先整理,再有条件地开放。那么青岛是不是可以更能进一步,把更多的数据开放出来,让整个企业界、让学生、让应用开放者来帮助整理,帮助采集,帮助提取?
清华—青岛大数据工程研究中心
清华—青岛大数据工程研究中心以清华—青岛数据科学研究院为技术依托,将围绕青岛市在大数据、云计算、物联网、移动互联网、互联网金融、海洋科技、现代制造等重要领域的科技需求,开展前沿技术创新、系统集成创新、工程化研发和科技成果转移转化,统筹推进青岛互联网大数据产业集群式发展。清华—青岛数据科学研究院以清华—青岛大数据工程研究中心为成果转化平台,整合已有的科研布局和科技创新成果,与青岛市各方开展科研合作、人才合作和教育合作,打造大数据科技创新新高地。通过建设双方优势互补,探索一条教育—科技—经济紧密结合、增强区域自主创新能力、促进区域经济社会发展的现代产业发展的协同创新模式。
中心以国家大数据体系建设需求为导向,面向青岛有地方优势的领域发展、发挥研究院的技术优势,力求在三年内建成“两基地、一平台”,即:大数据科技研发基地、大数据企业孵化基地、大数据科技云平台,并尽快组织启动实施一批围绕大数据的本地化应用示范项目。