基于Flink构建实时数仓实践
相关推荐
-
汽车之家湖仓一体架构实践
编辑整理:DataFun.Flink中文社区 导读:本文将介绍如何基于Apache Iceberg构建湖仓一体架构,将数据可见性提升至分钟级:从多维分析的角度来探讨引入Apache Iceberg带来 ...
-
Flink在bilibili大数据与AI方向的探索与实践
分享嘉宾:郑志升@bilibili 内容来源:Flink中文社区 导读:本文由 bilibili 大数据实时平台负责人郑志升分享,本次分享核心讲解万亿级传输分发架构的落地,以及 AI 领域如何基于 F ...
-
Apache Kudu在网易的实践
编辑整理:张德通@数数科技 出品:DataFunTalk 本文主要介绍Apache Kudu及在网易实时数据采集.维表数据关联.实时数仓ETL.ABtest等场景的实践应用.主要内容包括: 系统概述: ...
-
传统数仓如何转型大数据
一.数据仓库 数据仓库:数据仓库系统的主要应用主要是OLAP(On-Line Analytical Processing),支持复杂的分析操作,侧重决策支持,并且提供直观易懂的查询结果.也就是说,数据 ...
-
好未来基于DorisDB的全新实时数仓实践
好未来(NYSE:TAL)是一家以智慧教育和开放平台为主体,以素质教育和课外辅导为载体,在全球范围内服务公办教育,助力民办教育,探索未来教育新模式的科技教育公司.截至2020年11月底,好未来在102 ...
-
回顾·基于HBase实时数仓探索实践
本文根据上海久耶大数据研发工程师武基鹏在中国HBase技术社区第四届MeetUp上海站中分享的<基于HBase实时数仓探索实践>编辑整理而成. 今天从六个方面介绍,首先是久耶第一代离线数仓 ...
-
基于Kafka Flink平台化设计,实时数仓还能这样建
背景 Flink + Kafka 平台化设计 Kafka 在实时数仓中的应用 问题 & 改进 一.背景介绍 1.流平台通用框架 目前流平台通用的架构一般来说包括消息队列.计算引擎和存储三部分, ...
-
基于 Flink ClickHouse 打造轻量级点击流实时数仓
Flink 和 ClickHouse 分别是实时计算和(近实时)OLAP 领域的翘楚,也是近些年非常火爆的开源框架,很多大厂都在将两者结合使用来构建各种用途的实时平台,效果很好.关于两者的优点就不再赘 ...
-
当 TiDB 与 Flink 相结合:高效、易用的实时数仓
随着互联网飞速发展,企业业务种类会越来越多,业务数据量会越来越大,当发展到一定规模时,传统的数据存储结构逐渐无法满足企业需求,实时数据仓库就变成了一个必要的基础服务.以维表 Join 为例,数据在业务 ...
-
生产队的驴永不懈怠 | 尚硅谷Flink实时数仓视频教程
摘要:这世间青山灼灼星光杳杳,秋雨淅淅晚风慢慢,也抵不过公子眉目间的星辰和大数据视频. 我趁老婆洗澡,看了一眼她手机, 发现她和丈母娘的语音聊天. 老婆说:今天胸口闷得慌, 老婆说:待会儿把他揍一顿出 ...
-
腾讯看点王展雄:实时数仓与多维实时分析系统搭建
近几年,数字驱动的口号越喊越响,在这样一个用数据说话的时代,数据在一定程度上决定企业的业务和决策.而从数据驱动的方面考虑,多维实时数据分析系统的重要性也不言而喻.但是当数据量巨大的情况下,企业对数据技 ...
-
菜鸟实时数仓技术架构演进
『平时多流汗,战时少流血』 分享嘉宾:贾元乔 菜鸟 高级数据技术专家 编辑整理:夏飞飞 内容来源:Flink Forward ASIA 出品平台:DataFunTalk 注:转载请在公众号后台回复&q ...
-
论本质管理思想——基于港珠澳大桥岛隧工程管理实践
一.前言 被英国<卫报>誉为"新世界七大奇迹之一"的港珠澳大桥,是桥.岛.隧一体化的世界级交通集群工程,其中 6.7 km 长的海底隧道是这项超级工程的关键节点,被公认 ...