返回 登录
0

华为徐兴海:FusionInsight将同时支持私有云和公有云

【CSDN现场报道】2015年12月10-12日,由中国计算机学会(CCF)主办,CCF大数据专家委员会承办,中国科学院计算技术研究所、北京中科天玑科技有限公司与CSDN共同协办,以“数据安全、深度分析、行业应用”为主题的 2015中国大数据技术大会 (Big Data Technology Conference 2015,BDTC 2015)在北京新云南皇冠假日酒店盛大开幕。

在10日上午的主题大会上,来自华为IT产品线大数据解决方案规划总监徐兴海做了主题为《持续支撑业务创新的大数据平台及商业实践》的演讲。会后,徐兴海接受了CSDN记者的专访。

图片描述

图注:华为IT产品线大数据解决方案规划总监 徐兴海

CSDN:去年李国杰院士在大数据技术大会上提到过,大数据已经从概念慢慢落地。华为在2015年在大数据应用方面做的成果大概是什么样的?比如有哪些行业和典型应用?

徐兴海:华为从2009年开始有节奏的投入大数据领域,如今已经取得开源社区、客户和生态伙伴的共同认可,在Apache Hadoop和Spark社区投入高级专家持续贡献内核代码,已取得社区排名全球第四的成绩;2011年发布第一个平台版本,成功帮助电信运营商改善了基站投资结构,大幅降低了高端客户的离网率,再到2013年发布全新架构的FusionInsight大数据平台,快速在金融、公安、政府、教育等行业取得突破,累计成功部署上百个项目。

CSDN:FusionInsight这个平台是不是基于您自己华为云之上做的平台?

徐兴海:华为FusionInsight是基于开源的技术(Hadoop、spark),在这之上华为进行了自研的增强,包括安全、管理、性能、兼容性,容灾、备份,SQL能力等等,但是华为一直是保持开放性的,能始终同步开源的最新成果,FusionInsight最新版本已经是Hadoop 2.7.2。

CSDN:关于大数据这块,实际上技术本身也在不断发展,除了Hadoop,像现在的spark,应用这种工具也很多,用户的需求这几年变化也是越来越多,技术的业务不断发展,应用也在越来越多,像FusionInsight这样的平台能容纳这些技术吗?

徐兴海:您问的问题很好,这就需要一个平台,而不仅仅是一个个烟囱系统。一个系统可能非常好的解决一个问题,但是如果出现第二个场景,可能就需要进行大的改造,平台的意义就是可以支持百花齐放的应用,处理不同的场景。华为大数据平台我们有很好的框架,过去是Hadoop,现在Spark又进来了,都是基于统一的调度,流处理技术也融合进来了,逐渐形成了企业级大数据平台。

为什么需要的是平台,而且是企业级,今年和一个大企业CTO交流时,他的一段话很好的回答了这个问题:“大数据是战略,也是变革,一定是平台化的,而且是大平台,也不是一朝一夕能完成的,故要始终以平台的眼光看建设需求,而不仅仅是应用,现在只能看到大数据带来业务的改变,数据和经验积累后,平台化能支撑量变到质变,未来才能快速的推出批量的创新应用,故我们选择的一定是企业版,搞开源不是我们的主业,在选合作伙伴的时候,我们一定考虑门当户对,因为强有力的合作伙伴才能保证3~5年的供应、合作安全。另外全公司的业务上千种,上百个部门都需要数据的加工和分析,如何让大数据平台能集中全量数据,并服务化的快捷提供给各部门使用,是我们追求的。”

CSDN:今天大数据的发展,包括我们今天看报告,除了过去说互联网之类的数据,运营商之类的,现在更多的是工业类的,城市类的数据,像智慧城市这种的。您当时提出数据变化3.0里面,已经包括了移动互联网、物联网这些应用,这样的平台在打造过程中,它的难点在哪里?

徐兴海:银行的数据很集中,银行很多是两地三中心,它需要一个非常好的平台,需要大集群、容灾备份能力等等。互联网尤其物联网时代,接入数据是非常分散的,是全渠道的,接触面非常广,业务形态也变化多端,这就需要平台也能支持按需提供服务,自助的方式提供数据分析,这个时候大数据处理需要跟云更好结合在一起。

现在以公有云为代表的企业走出了一条路,公有云已经开始在很多大数据场景中应用,华为已经把大数据处理架在了云平台上,公有云有更好的触角更方便的收集处理数据,我们不是简单的把Hadoop&Spark装在虚拟化上,是要针对企业场景做计算和存储的充分优化。未来两年将全面进入以人为中心的整合数据时代,业务以人可接触到的全渠道统一面貌出现,技术架构上需要大数据完全服务化,内部私有云,加外部公有云,用统一的架构,并能更好的互通。

CSDN:就是这几块要融合在一起。

徐兴海:对,真正的融合,这就需要在云和大数据两方面都有所积累。

CSDN:您刚才谈到这个平台本身是基于开源的,而且是开放的,当时在2013年之后提出这样一个合作伙伴计划,现在围绕这个大数据,咱们的合作伙伴大概有多少?

徐兴海:在国内就是200家以上,比如说在金融行业,我们成立了金融大数据联盟,把金融行业重要合作伙伴都请到这个联盟里来,华为提供OpenLab实验室,供这些合作伙伴把自己的应用装在大数据平台上,做认证也做展示,华为也跟合作伙伴一起做一些项目,毕竟还是要有所落地,包括在公安行业,政府行业,也都是通过合作伙伴方式共同为客户提供大数据服务的。

CSDN:您对未来一年大数据,一个是技术发展怎么样看,行业应用方面有怎样的预测,华为打算明年怎么做?

徐兴海:我认为在未来一年,尝试大数据较早的行业和客户,比如金融和电信运营商,会把大数据向实时类业务去应用。对厂商来说是有挑战的,因为都是关键业务,比如在线风控是非常关键的业务,如何利用大数据处理平台做到事中拦截欺诈,甚至应用机器学习的方法做到事前发现风险,都需要大数据平台提供更快的处理能力,更可靠的流处理技术等。

CSDN:谢谢您的分享。

现场记者:邵海宏

评论