欢迎访问乐酷家

让数据更有价值 华为GaussDB获得数博会2021年领先科技成果奖

新闻动态 2021-05-30 创始人
更高效!更便捷!更安全!华为技术有限公司申报的“华为云GaussDB(DWS)实时数仓:实时数据分析技术”项目,以亮眼的表现,在2021中国国际大数据产业博览会(以下简称“数博会”)获得2021领先科技成果奖-“新技术奖”。 数博会是全球首个以大数据为主题的国家级博览会,自2015年创办至今,已发展成为展示最新成果、引领行业发展的国际性盛会和交流发展思想、创造合作机遇的世界级平台。七年来,凭借国际化、专业化、市场化的引领优势,数博会吸引了百余个国家上千家企业、数万名行业精英参会参展,受到国内外各界人士广泛关注。领先科技成果奖是数博会的最高奖项,也是唯一以大数据为主题的社会科技奖励,其专业性、权威性、引领性获业界一致认可。 在数博会上,华为云技术高级项目总监陆霆作为该技术的主要研发人员之一,对GaussDB的技术原理及优势进行了介绍。陆霆主导开发设计了华为云GaussDB(DWS)实时数仓,他指出,华为云GaussDB(DWS)实时数据分析技术,旨在为企业创造更多的业务数据价值。它目前已支撑超过1000家大客户核心业务运行的标准数仓架构上进行演进,针对实时数据分析场景,以一份数据、多引擎协同的架构实现了T+0的实时数据与历史数据关联分析。该架构首创性地把多引擎融合在一起协同工作,对OLAP引擎、CEP引擎、时序引擎进行扩展,达到一份数据多个引擎调用、高效多维度分析的效果。 “总的来说,针对传统数据仓存在的瓶颈GaussDB(DWS)实时数据分析技术实现了五个方面的突破。”陆霆高度总结了该技术的特点及优势,具体表现如下: 一是更快速。针对传统数据先入库再查询导致数据处理延时的问题,CEP引擎提供流计算能力,让实时反馈数据计算结果成为可能。实时数仓时序数据单机入库性能支持每秒10万条数据、每秒60万条流数据持续计算入库,并可线性扩展。 二是更高效。针对数据跨系统间迁移导致加载时间长的问题,华为国内首创同一套系统内实现流和时序数据的处理和预聚合操作(Flink/Spark Streaming+Druid+InfluxDB),最大化的利用系统缓存,提高处理效率。 三是更简洁。采用最简洁高效的数据开发语言SQL完成复杂流式计算语义定义,实现亿级数据,秒级聚合,极大简化应用开发。 四是更节约。针对存储冗余的问题,时序数据经过实时数仓的自适应压缩算法,最高可达40:1的压缩比,极大地减少存储空间,节省用户成本。 五是更安全。通过统一安全管理、一套用户管理,避免多组件带来的用户权限混乱,支持透明加密和脱敏,整体提升了实时分析技术的安全性。 GaussDB作为华为自主研发的融合数仓产品,目前已广泛应用政府、金融、互联网、保险、通信等行业,为全球 60 多个国家和地区的 3000 多家政企客户提供服务,包括工商银行、建设银行、招商银行、中信银行、光大银行、华夏银行、一汽集团、中国移动通信等世界500强企业,成为企业数字化转型的坚实伙伴。华为云将携手合作伙伴,助力各行业实现全面云化、数智融合和全场景智联,推动 5G+大数据服务百姓、融入百业。
The End
免责声明:本文内容来源于第三方或整理自互联网,本站仅提供展示,不拥有所有权,不代表本站观点立场,也不构成任何其他建议,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容,不承担相关法律责任。如发现本站文章、图片等内容有涉及版权/违法违规或其他不适合的内容, 请及时联系我们进行处理。

Copyright © 2099 乐酷家 |中华人民共和国增值电信业务经营许可证号:苏B2-20221286

苏ICP备2022030477号-14 |——:合作/投稿联系微信:nvshen2168

|—— TXT地图 | 网站地图 |