Hologres实时数仓

内容纲要

名称

实时数仓Hologres(原交互式分析)播放视频

帮助文档:Hologres产品帮助文档
开发者社区:Hologres技术分享与实践
视频中心:客户案例,最佳实践分享
实时数仓20讲:Hologres从入门到精通
开始使用Hologres:如何创建实例和数据库
开发指南:开发规范、数据类型和兼容函数
CREATE TABLE:如何在Hologres中创建表
支持的数据类型:Hologres支持的数据类型及数组类型

热门电子书

实时数仓Hologres最佳实践合集

实时数仓Hologres技术入门一本通

实时数仓Hologres数据查询最佳实践

实时数仓王炸组合Hologres+Flink

公开课

课程一:30分钟快速使用Hologres

课程二:在线服务(点查)场景快速入门

课程三:权限模型详解

课程四:RAM账号快速入门

介绍

Hologres是一站式实时数据仓库引擎,支持海量数据实时写入、实时更新、实时分析,支持标准SQL(兼容PostgreSQL协议),支持PB级数据多维分析(OLAP)与即席分析(Ad Hoc),支持高并发低延迟的在线数据服务(Serving),与MaxCompute、Flink、DataWorks深度融合,提供离在线一体化全栈数仓解决方案。

实时数仓 Hologres
一站式实时数仓 Hologres,将多个数据应用构建在统一存储之上,实现一份数据,多种计算场景。

产品优势

  • 统一数据平台
    解决数据孤岛、数据口径不一致问题
    1份数据多种场景,可同时替换 OLAP 引擎(Greenplum/Presto/Impala/ClickHouse等)或 KV 数据库(HBase/Redis等)。
  • 极速数据处理
    解决分析效率问题
    TPC-H 30,000GB标准测试结果世界第一,领先第二名23%。支持10亿+/秒的高吞吐实时写入与更新,PB级数据可实现秒级分析。
  • 全链路实时化
    解决数据时效性问题
    支持高性能的数据实时写入、实时更新、实时查询,持续保持数据新鲜度,助力企业数据分析实时化。

产品功能

技术解决方案

统一数仓解决方案

构建公司集中的数仓服务层,提供统一的数据查询接口和一致的指标口径,满足数据实时化的需求,支撑多场景访问数据的能力,减少数据割裂,本质性改善传统大数据数仓组件多,运维复杂,开发周期长,口径不统一的难题。

离线实时一体解决方案

大数据数仓体系从“纷繁芜杂”的Lambda架构演进到“化繁为简”的实时离线一体化数仓,其核心是基于流式计算引擎对接了 MaxCompute + Hologres离线及实时数仓,并通过元数据、数据互通实现数仓的分层处理 。

流式数仓解决方案

随着企业对数据时效性的需求越来越强烈,面向实时加工、实时存储、实时分析的实时场景问题日益突出。Hologres基于 Streaming Warehouse 理念,实现数仓分层之间实时数据的高效流动,解决实时数仓分层问题。

湖仓一体解决方案

Hologres通过与DLF、OSS无缝集成,以外部表的方式,无需移动数据(外表只做字段映射,不真正存储数据),就能直接加速读写存储于OSS上的各种格式类型的数据,降低开发运维成本,打破数据孤岛,实现业务洞察。

向量检索解决方案

大模型可以广泛应用于各行各业,但对垂直行业的专业问题回答能力尚不完善。Hologres支持高并发低延时的向量检索能力,可以和大模型、PAI完美结合,完成企业专属问答知识库的搭建。

高可用解决方案

针对线上生产环境高可用的场景,提供了共享存储的主从多实例部署方式和计算组实例,在该模式下支持故障隔离,负载隔离,有效支撑了高可用场景。

产品架构

https://help.aliyun.com/zh/hologres/product-overview/architecture

应用场景

电商:实时推荐和精准营销

基于流量数据的实时精准营销
随着流量红利逐步消失、拉新成本飞速上升等问题,某跨境电商公司业务发展需要从原始的野蛮生长逐步转型,原传统Lambda架构复杂,无法支撑多维指标细粒度分析,不能达到精细化运营的目的。通过实时数仓升级,稳定支撑历年双11,节约成本近50%,提效300%,实现实时精准营销。

场景优势
  • √ 实时业务推荐
    以Hologres行存表替换HBase,Flink实时关联Hologres维表,实时生成用户标签,助力业务实时运营决策,实时用户触达和推荐。
  • √ 灵活多维分析
    标准SQL语法,充分支持精细化运营复杂多维分析诉求,数据加工延迟从3小时加速到实时,多表关联join秒级返回,流量匹配效率提升300%。
  • √ 成本节省50%
    Flink+Hologres一套架构支持多种业务场景,弹性扩缩容,运维更简单,有效节省资源近50%。

推荐搭配使用

互联网社交:实时多维分析

基于用户日志数据的实时多维分析
某互联网社交公司原先通过自建ClickHouse进行实时多维分析,但随着业务增长,推荐业务在典型OLAP分析场景需要更加实时的调整策略和更新模型,以达到召回、精细化运营的目的。通过Hologres替换自建ClickHouse,构筑全链路精细化运营,满足ABTest场景下复杂的探索式分析。

场景优势
  • √ 实时更新效率高
    替换自建ClickHouse,Hologres有主键,可以精确去重,与Flink深度集成,支持高吞吐实时写入和更新。
  • √ 轻松查询大量数据
    相比自建ClickHouse,可轻松对7天甚至15天数据,千亿级别数据实时多维分析,满足业务不同查询需求。
  • √ 免运维
    Hologres存储计算分离,存储计算资源独立扩展,可轻松存15天数据,动态扩缩容免运维,只需要专注于业务开发。

推荐搭配使用

物流:实时订单分析和实时监控

基于物流数据的实时订单分析和实时监控
某货运物流公司其大数据部门一直在探索建设新一代数仓,但一直没有取得很大突破,无法让数据发挥更大价值。通过Hologres建立的新一代实时数仓,替换原有ES、HBase等架构,解决千万级订单数据实时分析慢和上百万货运司机物流实时调度难的问题。

场景优势
  • √ 订单数据灵活分析
    减少了维度退化的设计,支持千万订单数据实时多维分析,提升业务查询灵活性和开发效率。
  • √ 交付效率由几天提升到几分钟
    替换HBase,由Hologres提供在线服务的能力,实时监控物流和仓库异常,提高监控服务的稳定性和物流交付效率。
  • √ 统一数据服务出口减少架构冗余
    实时和离线整合成一套架构,共同使用一份数据,统一数据服务出口,数据处理时效性提升,减少架构冗余。

推荐搭配使用

互联网服务:数据中台和实时大屏

基于业务日志的实时大屏和数据中台
某互联网服务公司原先通过Greenplum、EMR离线架构来搭建实时数仓,但数据更新时效性差,无法实时掌握业务动态。为实现全场景的用户增长需求,采用Flink+Hologres新一代实时数仓,基于业务日志数据构建实时大屏和数据中台系统,加速知识数据探索,促进业务快速发展。

场景优势场景优势
  • √ 报表查询秒级响应
    完美支撑营收额、订单量等指标实时报表查询,满足企业运营中对于数据时效性越来越高的要求,秒级响应。
  • √ 实时监控实时决策
    通过Hologres提供的高并发读写能力,关联设备状态表,可以实时更新状态,满足CRM系统对设备(充电宝)的实时查询和监控,并助力业务实时决策。
  • √ 降低运维开销
    替换开源Hive、Impala等,精简业务架构,避免数据孤岛以及一致性、安全性等问题,降低了开发、运维维护开销。

推荐搭配使用

产品功能对比

为什么选择Hologres?

产品规格

产品动态

安全合规

Hologres 通过了独立的第三方审计师针对阿里云对 AICPA 可信服务标准中关于安全性、可用性和机密性原则描述的审计,同时通过了通过了PCI DSS认证,PCI-DSS是目前全球最严格且级别最高的金融数据安全标准。

查看《安全白皮书》

Leave a Comment

您的电子邮箱地址不会被公开。 必填项已用*标注

close
arrow_upward