孙垚光:数势携手Doris为企业带来极致性能体验
作者:龚作仁 文章来源:Laborer
2023-10-25 17:32
上周末,由新一代实时数据仓库厂商北京飞轮数据(SelectDB)主办的Apache Doris社区年度技术峰会——Doris Summit Asia 2023于北京圆满落幕。现场有近百技术领袖参与大会分享,1000+ 线下参会者共聚一堂。作为重要合作伙伴,数势科技受邀出席大会,展示双方相互兼容、认证的企业数字大脑产品体系,为金融和消费行业带来业务增长新思路。
数势科技首席架构师孙垚光先生作为代表出席并带来主题演讲,以指标平台为核心,解析数势科技如何携手Doris为客户带来更加极致的性能体验,助力企业高效实现数据深度分析,议题包括产品形态、核心技术、性能效果和应用案例等。
01指标平台:全链路指标化,让业务更友好、管理更高效
数势科技指标平台基于业内领先的OLAP数据库Apache Doris构建,为企业提供友好易用、灵活稳定的全链路指标平台服务。平台围绕指标场景打造的专属指标计算引擎,以管用一体和全链路指标化设计理念,实现指标管理和应用的统一、自助和高效。
向上,该平台灵活支撑业务需求,通过指标API统一服务应用系统,实现一次定义,随处使用;提供简单易用功能,让业务自己可以配指标用指标,实现业务自服务;向下,它可驱动数据仓库建设,以面向业务应用的指标体系,牵引数据仓库模型建设,让业务对数仓价值更有感知,技术更好落地。
02指标计算引擎HME:支撑指标平台产品性能的核心保障
指标计算引擎HME是数势科技自主研发的高性能指标计算服务,HME承载着平台的指标计算与查询任务,是满足指标查询性能要求、保证良好用户体验的核心。
孙垚光在演讲中提到,指标计算引擎像是一个大脑,一个驱动器(Driver),通过收集物理数据的元信息和指标元信息,对这两部分信息进行处理,自动生成预处理任务,包括创建物化视图等等,来实现加速指标查询的效果。同时指标计算引擎也是一个查询引擎,当有指标查询的时候,需要把指标查询逻辑重定向到最优的查询路径和数据集。
在指标计算引擎的加持下,配置驱动开发的这种方式,是数仓和数据集市开发的一种新范,引擎可以在指标定义和查询的信息指引之下,自动化的完成数据集市各个表的计算工作;也可以降低数据开发门槛,提升数据质量。
最后,孙垚光认为指标计算引擎作为数据虚拟化理念的一个很好的落地和实践,非常具有技术挑战,以及非常广阔的业务应用前景,数势愿意与相关同行一起,在这个方向上进行持续探索和落地。
指标引擎需要通过高性能的OLAP引擎和计算加速引擎来提升整体指标查询性能。孙垚光在演讲中重点介绍了Apache Doris核心特性依赖:多租户/负载隔离、物化视图、Bitmap精准去重和ETL Job性能和稳定性,阐述了SelectBD的数据库对数势科技指标平台性能的支持作用。
SelectDB实时数仓基于Apache Doris内核构建,具备世界领先的端到端实时数据集成、存储和查询的通用能力,能够充分满足不同行业实时数据分析场景的需求。其四大特色解决方案:实时报表与多维分析、数据联邦与查询加速、用户画像与分析、日志存储与分析,助力数势科技指标平台在金融和零售领域客户以超低资源成本实现极致的性能提升。
03应用案例:助力某世界500强企业实现业务“可盈利的持续规模增长”
数势科技指标平台曾服务某世界500强企业。据孙垚光介绍,该企业业务增长受限于流程模式及指标口径模糊等问题,以往多渠道、全链条的经营状况只能通过后置性的财务结果观察,始终无法即时、全面地获取和评估,难以实现企业“可盈利的持续规模增长”。
为此,数势科技指标平台产品结合数据治理、指标体系设计服务,围绕指标为客户构建了包括“北极星经营策略分析”、“360商品力分析” 等经营分析及决策应用,推动企业进行组织、能力建设,带来多方面的业绩表现提升,扩大了企业管理半径,激活不同层级的目标导向。
第一步:对原有散落无体系的指标进行统一定义管理;
第二步:统一指标平台为各应用系统提供查询服务;
第三步:根据不同业务场景从不同业务系统获取的指标准确一致;
第四步:客户对指标使用的反馈以需求的形式回流至数仓,丰富指标数据资产。
SelectDB作为基于Apache Doris内核构建的非常优秀的OLAP商业化版本和服务,自今年5月数势科技与北京飞轮数据(SelectDB)完成产品兼容互认证起,双方便深入融合各自的产品优势和服务能力,为企业的数字化升级提供高性价比、安全可靠、现代化的数据智能产品。未来,在本次大会结束后,双方也将进一步加深合作,为金融和消费领域企业带来更多的商业价值和实践方法论。
关于数势科技
数势科技是行业领先的数据智能平台与技术服务提供商,凭借丰富的零售消费和零售金融领域业务know-how及技术know-how,深耕行业,通过一系列智能决策产品,助力零售,金融及制造等企业在数据资产,经营分析、智能营销等领域实现数字化升级,打造业务增长新引擎。目前已与众多零售、品牌及金融行业头部客户建立战略合作,为其提供数字化升级解决方案。
注:文/龚作仁,文章来源:Laborer,本文为作者独立观点,不代表亿邦动力立场。
【版权提示】亿邦动力倡导尊重与保护知识产权。未经许可,任何人不得复制、转载、或以其他方式使用本网站的内容。如发现本站文章存在版权问题,烦请提供版权疑问、身份证明、版权证明、联系方式等发邮件至run@ebrun.com,我们将及时沟通与处理。
已点赞
{{ praise_text }}
好文章,值得被更多人看到
FAQ回顾
数势科技指标平台的核心技术架构是什么?
数势科技指标平台基于Apache Doris构建,采用自主研发的指标计算引擎HME,通过物化视图等技术实现指标查询加速,支持多租户和负载隔离。
数势科技指标平台如何帮助企业实现数据驱动?
平台通过全链路指标化管理,统一指标定义和查询服务,帮助企业构建经营分析应用,如北极星经营策略分析,提升数据资产价值和管理效率。
数势科技与SelectDB的合作带来了哪些优势?
双方自2023年5月完成产品兼容互认证,深度融合Apache Doris的实时分析能力,为金融和零售客户提供高性价比、安全可靠的数据智能解决方案。
- 标签:
- 业界
下一篇
2023年生活用纸电商消费趋势洞察
作为家庭生活中不可或缺的必需品之一,我国生活用纸的消费市场体量庞大且逐年上升。据中国造纸协会数据,2022年我国生活用纸消费量为1059万吨,较2021年增长1.24%。
















