让数据更有价值 华为GaussDB获得数博会2021年领先科技成果奖
新闻动态 2021-05-30 创始人
更高效!更便捷!更安全!华为技术有限公司申报的“华为云GaussDB(DWS)实时数仓:实时数据分析技术”项目,以亮眼的表现,在2021中国国际大数据产业博览会(以下简称“数博会”)获得2021领先科技成果奖-“新技术奖”。
数博会是全球首个以大数据为主题的国家级博览会,自2015年创办至今,已发展成为展示最新成果、引领行业发展的国际性盛会和交流发展思想、创造合作机遇的世界级平台。七年来,凭借国际化、专业化、市场化的引领优势,数博会吸引了百余个国家上千家企业、数万名行业精英参会参展,受到国内外各界人士广泛关注。领先科技成果奖是数博会的最高奖项,也是唯一以大数据为主题的社会科技奖励,其专业性、权威性、引领性获业界一致认可。
在数博会上,华为云技术高级项目总监陆霆作为该技术的主要研发人员之一,对GaussDB的技术原理及优势进行了介绍。陆霆主导开发设计了华为云GaussDB(DWS)实时数仓,他指出,华为云GaussDB(DWS)实时数据分析技术,旨在为企业创造更多的业务数据价值。它目前已支撑超过1000家大客户核心业务运行的标准数仓架构上进行演进,针对实时数据分析场景,以一份数据、多引擎协同的架构实现了T+0的实时数据与历史数据关联分析。该架构首创性地把多引擎融合在一起协同工作,对OLAP引擎、CEP引擎、时序引擎进行扩展,达到一份数据多个引擎调用、高效多维度分析的效果。
“总的来说,针对传统数据仓存在的瓶颈GaussDB(DWS)实时数据分析技术实现了五个方面的突破。”陆霆高度总结了该技术的特点及优势,具体表现如下:
一是更快速。针对传统数据先入库再查询导致数据处理延时的问题,CEP引擎提供流计算能力,让实时反馈数据计算结果成为可能。实时数仓时序数据单机入库性能支持每秒10万条数据、每秒60万条流数据持续计算入库,并可线性扩展。
二是更高效。针对数据跨系统间迁移导致加载时间长的问题,华为国内首创同一套系统内实现流和时序数据的处理和预聚合操作(Flink/Spark Streaming+Druid+InfluxDB),最大化的利用系统缓存,提高处理效率。
三是更简洁。采用最简洁高效的数据开发语言SQL完成复杂流式计算语义定义,实现亿级数据,秒级聚合,极大简化应用开发。
四是更节约。针对存储冗余的问题,时序数据经过实时数仓的自适应压缩算法,最高可达40:1的压缩比,极大地减少存储空间,节省用户成本。
五是更安全。通过统一安全管理、一套用户管理,避免多组件带来的用户权限混乱,支持透明加密和脱敏,整体提升了实时分析技术的安全性。
GaussDB作为华为自主研发的融合数仓产品,目前已广泛应用政府、金融、互联网、保险、通信等行业,为全球 60 多个国家和地区的 3000 多家政企客户提供服务,包括工商银行、建设银行、招商银行、中信银行、光大银行、华夏银行、一汽集团、中国移动通信等世界500强企业,成为企业数字化转型的坚实伙伴。华为云将携手合作伙伴,助力各行业实现全面云化、数智融合和全场景智联,推动 5G+大数据服务百姓、融入百业。
The End
相关阅读
- 重磅 | 惠发食品召开2024新品发布会暨战略客户数字化赋能研讨会
- 全新一代雷克萨斯GX上市,硬派霸气外观与澎湃驾趣共在
- 从百年青年运动史中汲取奋进力量
- 名创优品全球最大门店在印尼雅加达开业,名创优品玩转IP潮流新体验
- 手机媒体发稿,钰尚网络文化传媒助您实现软文营销、媒体宣传、稿件发布、品牌软文发布
- “19岁,绝美青春”:绝味鸭脖再推新品引爆中国休闲卤制品市场
- 创意微电影拍摄、突出亮点,钰尚传媒掌握宣传新风向!
- 央行:我国不存在长期通缩或通胀的基础
- 尖叫一声!世界杯推广文案下一秒掀起狂潮!世界杯软文宣传、钰尚网络文化传媒、品牌软文发布
- 美股开盘:道指跌近70点科技股多数下挫Snap重挫近20%