让数据分析极速统一!StarRocks和阿里云一起干了件大事
“过去,仅仅是管理层少数人定期查看各种数据报表;如今,哪怕基层员工都是数据消费者,日常业务中随时需要使用历史数据和实时数据做决策,这种趋势将不可阻挡。”去年一家银行数据部负责人对大数据在线如是说。
的确,这就是当下各行各业的现状。随着企业数字化转型的深入,数据分析不仅越来越依赖历史数据,也越来越需要利用实时数据进行决策。随着数据分析模式发生巨大变化,如何对历史数据和实时数据进行极速统一的分析,将成为每一个企业在未来几年要重点攻克的问题。
然而,哪怕是Snowflake和Databricks这两大数据分析领域的明星企业,当前也无法对实时数据进行有效分析。如何对历史数据和实时数据进行极速统一的分析,是新一代数据架构创新者需要重点攻克的难题。
StarRocks成立两年多来,一直致力于打造“极速统一”的全新数据架构,可以对历史数据和实时数据进行极速统一分析,从而为数据分析和数据洞察带来革命性改变。当前,腾讯、顺丰、Airbnb、携程、京东、众安保险等不少行业头部公司正借助StarRocks构建统一的OLAP平台,数据分析体验获得全面提升。
作为新一代数据架构的创新者,StarRocks和阿里云近日共同发布了阿里云EMR StarRocks云服务。一个是全球云计算Top 3、中国第一的云服务商,一个是近年来迅速崛起的专注打造下一代“极速统一”数据架构的公司,二者合作打造出了低门槛、低成本的极速统一分析服务,真正开启了数据分析的新范式。
01
“全面分析数据”
数字化转型的关键能力
人们常言:数据即21世纪的石油。与石油需要开采、存储和提炼才能使用类似,数据也需要经过采集存储和挖掘分析,才能将价值体现出来。
在越来越多的企业中,比如互联网,银行、保险、物流,大型零售等,一线业务人员都需要对业务实时变化进行分析,及时调整业务决策,让业务获得最大的成果。双十一促销策略、物流配送策略、用户推荐策略、金融投资组合等等,都需要实时调整。
在未来三到五年,实时数据分析将和历史数据分析一样,成为企业数字化经营的核心能力。能不能对历史数据和实时数据进行极速统一的全面分析,将成为每一个企业数字化转型的关键能力。
当前,企业的历史数据都存储在数据湖中,实时数据存储在OLTP数据库中。为了帮助企业打造极速统一的数据架构,StarRocks和阿里云EMR团队联合打造了数据湖极速分析能力,基于StarRocks可以对数据湖的历史数据进行极速分析。另外,双方也打造了Flink+StarRocks的联合方案,可以简单快速地构建实时链路,实现对实时数据的极速分析。
02
走向“极速统一”
数据分析新范式
StarRocks和阿里云双方一直致力于帮助用户打造极速统一的新架构,让用户可以同时对历史数据和实时数据进行极速统一分析。
近期推出的阿里云EMR StarRocks可以非常出色地分析存储在Hive、Iceberg和Hudi等数据湖里的数据,当前性能已经可以达到世界顶级同类产品(比如Presto/Trino)的3-5倍以上。
另外,在实时数据分析方面,阿里云EMR StarRocks可以非常好地支持业务数据变更,对业务变更数据的查询性能比ClickHouse等世界顶级同类产品快3-5倍以上。
在StarRocks社区和阿里云的共同努力下,在支持历史数据和实时数据的极速统一分析方面,StarRocks在世界范围内已经达到了非常领先的水平。
当前,StarRocks产品已经在多个行业的诸多头部客户的业务场景中得到验证,并且获得了用户的广泛认可。以众安保险为例,为了更好地支持业务数字化运营,众安保险基于StarRocks构建了全新的数据分析平台,可以一站式地对历史数据和实时数据进行极速的复杂分析,实现了零代码拖拽式分析与秒级响应。公司多个部门超过3000 ⼈在日常中广泛使用,提升超过 50% 的数据分析效率,降低了众安 40% 的⼈⼒成本。
03
StarRocks
新一代计算引擎的创新者
在按列存储技术取代按行存储以后,计算技术已经从按行计算转为按列做向量化计算。当前,Databricks、BigQuery等行业领头羊,都在开始大力打造全面向量化的计算引擎。
StarRocks在两年半前投入到向量化计算引擎的攻坚克难中,通过数千个优化,当前其计算引擎在世界范围达到了非常领先的水平,比传统计算引擎快3倍以上。极速的向量化计算引擎就像电动汽车的发动机,拥有了世界顶尖的计算引擎,StarRocks有望成为新一代极速统一数据架构的引领者。
基于StarRocks构建的新架构,企业就能够对历史数据和实时数据进行极速统一的分析,满足各种业务场景的需求。
04
StarRocks
为何值得用户持续关注
数据库被誉为“根技术”,乃基础软件皇冠上的明珠。进入到数智化时代,历久弥新的数据库迎来前所未有的变革期。
数据分析能力正在成为企业数字化转型的重点。StarRocks等新一代数据库公司之所以值得持续关注,在于它们身处一条极有前途的赛道。
以StarRocks为例,面世以来两年多的时间里,已被超过110家市值或估值在10亿美金以上的大型用户用于生产环境,生产环境中稳定运行的 StarRocks 服务器数目达数千台,成长速度惊人。
如今,随着阿里云EMR StarRocks服务的推出,双方有望将极速统一的数据分析能力赋能给更多行业用户。
面向未来,StarRocks还将持续投入到技术产品和社区生态建设上,吸纳更多开发者和用户,从而达成更多的世界领先。
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.
网址:让数据分析极速统一!StarRocks和阿里云一起干了件大事 http://c.mxgxt.com/news/view/448358
相关内容
StarRocks数据质量管理1024,我们干了点儿大事
基于大数据的舆情分析系统架构
StarRocks 2.1 新版本特性介绍
大数据的舆情分析
社交媒体的情感分析大数据模型
如何用数据中台,做一套关于明星的舆情分析系统?
数据分析:色情片中的大数据
英国研发AI球探系统 数据分析发掘体坛巨星
网易云化身“网抑云”事件网络舆情传播数据分析报告