华为承办首届亚洲Apache HBase™技术大会 推动大数据产业发展
发布时间:2017-08-17 08:56:50 热度:1515
8/17/2017,近日,华为在深圳承办首届亚洲Apache HBase™技术大会(HBaseCon Asia)。本次大会吸引300多名业界知名IT公司的HBase开发者参加,Apache HBase项目管理委员会(PMC)主席Michael Stack、多名PMC/Committer重量级成员,以及来自中国、美国、印度等国家的20余名HBase资深工程师发表了19场精彩演讲,分享与HBase 2.0、内核关键特性、HBase应用实践与行业创新、HBase云服务化、容器等相关的经验。
本次大会着重分享了HBase 2.0相关的规划及关键特性,HBase 2.0计划于2017年底正式发布,目前关闭问题数超过4400个,关键特性和改进点包括:新版本的Region分配管理器,更多利用堆外内存来减少数据读写过程中的数据复制次数以及优化垃圾回收问题,利用在内存中预先进行HFile Compaction的机制来减少写IO放大,利用RegionServer Group来更好的支持多租户场景以及新的异步客户端。和1.x版本相比,即将面世的2.0版本在时延稳定性、吞吐量、并发度、平均故障修复时间MTTR等方面,都会有明显提升。
华为承办首届亚洲Apache HBase™技术大会
在本次大会中,主办方华为有4名演讲者分享了与HBase相关行业的应用创新以及多租户、容灾备份方面的最新观点。在HBase行业应用结合创新方面,涉及以下两方面的内容分享:针对使用HBase作为结构化数据存储所提供的轻量级Client SDK CTBase, 以降低HBase的使用门槛;基于HBase实现的分布式位图索引方案Tagram,主要用于存储用户画像标签数据,提供ms级别的任意标签组合条件的Ad-hoc查询能力。
华为公司自HBase项目初始就对其持续关注,并在2010年开始进行规模投入,先后经历了从0.20到1.3的多个主要版本,和HBase社区共同亲历了HBase不断发展和壮大的历程。一直以来,华为公司都积极参与到HBase开源社区的贡献中,先后为该社区培养了2名PMC成员以及4名HBase Committer成员。在HBase与行业应用结合方面,华为也做了大量创新工作,以降低HBase使用者的门槛。目前,华为公司拥有自己的HBase企业发行版本,是华为企业版大数据平台FusionInsight HD中的一个关键组件,已经在海内外拥有了大量的企业用户,涉及到金融、运营商、公共安全、交通、电力、能源、制造等多个行业,共部署了数万个节点。
今年下半年,华为将在华为公有云上推出CloudTable服务,提供即开即用,按使用付费的HBase云化服务。该服务将作为华为公有云大数据解决方案的一个重要组成部分,提供企业级的数据安全防护能力、多租户弹性计算等能力,进一步降低用户使用HBase的门槛和成本。
本次大会着重分享了HBase 2.0相关的规划及关键特性,HBase 2.0计划于2017年底正式发布,目前关闭问题数超过4400个,关键特性和改进点包括:新版本的Region分配管理器,更多利用堆外内存来减少数据读写过程中的数据复制次数以及优化垃圾回收问题,利用在内存中预先进行HFile Compaction的机制来减少写IO放大,利用RegionServer Group来更好的支持多租户场景以及新的异步客户端。和1.x版本相比,即将面世的2.0版本在时延稳定性、吞吐量、并发度、平均故障修复时间MTTR等方面,都会有明显提升。
在本次大会中,主办方华为有4名演讲者分享了与HBase相关行业的应用创新以及多租户、容灾备份方面的最新观点。在HBase行业应用结合创新方面,涉及以下两方面的内容分享:针对使用HBase作为结构化数据存储所提供的轻量级Client SDK CTBase, 以降低HBase的使用门槛;基于HBase实现的分布式位图索引方案Tagram,主要用于存储用户画像标签数据,提供ms级别的任意标签组合条件的Ad-hoc查询能力。
华为公司自HBase项目初始就对其持续关注,并在2010年开始进行规模投入,先后经历了从0.20到1.3的多个主要版本,和HBase社区共同亲历了HBase不断发展和壮大的历程。一直以来,华为公司都积极参与到HBase开源社区的贡献中,先后为该社区培养了2名PMC成员以及4名HBase Committer成员。在HBase与行业应用结合方面,华为也做了大量创新工作,以降低HBase使用者的门槛。目前,华为公司拥有自己的HBase企业发行版本,是华为企业版大数据平台FusionInsight HD中的一个关键组件,已经在海内外拥有了大量的企业用户,涉及到金融、运营商、公共安全、交通、电力、能源、制造等多个行业,共部署了数万个节点。
今年下半年,华为将在华为公有云上推出CloudTable服务,提供即开即用,按使用付费的HBase云化服务。该服务将作为华为公有云大数据解决方案的一个重要组成部分,提供企业级的数据安全防护能力、多租户弹性计算等能力,进一步降低用户使用HBase的门槛和成本。