好未来基于DorisDB的全新实时数仓实践 / 开普饭

上一篇文章讨论了写缓存的架构解决方案,它虽然可以减少数据库写操作的压力,但也存在不足.比如需要长期高频插入数据时,这个解决方案就无法满足,本篇文章我们就围绕这个问题逐步提出解决方案.在架构方案层层展开 ...

11 月 24 日,在 TGO 鲲鹏会上海分会<技术领导者的增长黑客落地实践>活动上,神策数据联合创始人兼 CTO,TGO 鲲鹏会北京分会会员曹犟为大家带来了主题为< 一个用户行为分 ...

目前大数据架构已经走向了数据湖时代,无论是单纯的批处理模式,还是同时支持实时和离线数据处理的Lambda架构都已经过时.均不再适应现在大数据的业务发展需要. 一 Lambda架构相信现在还有很多公司 ...

导读随着公司用户增长业务快速发展,陆续孵化出部落.同镇.C 端会员.游戏等非常多的业务板块.与此同时产品及运营对实时数据需求逐渐增多,帮助他们更快的做出决策,更好的进行产品迭代,实时数仓的建设变得 ...

本文根据上海久耶大数据研发工程师武基鹏在中国HBase技术社区第四届MeetUp上海站中分享的<基于HBase实时数仓探索实践>编辑整理而成. 今天从六个方面介绍,首先是久耶第一代离线数仓 ...

背景 Flink + Kafka 平台化设计 Kafka 在实时数仓中的应用问题 & 改进一.背景介绍 1.流平台通用框架目前流平台通用的架构一般来说包括消息队列.计算引擎和存储三部分, ...

Flink 和 ClickHouse 分别是实时计算和(近实时)OLAP 领域的翘楚,也是近些年非常火爆的开源框架,很多大厂都在将两者结合使用来构建各种用途的实时平台,效果很好.关于两者的优点就不再赘 ...

近几年,数字驱动的口号越喊越响,在这样一个用数据说话的时代,数据在一定程度上决定企业的业务和决策.而从数据驱动的方面考虑,多维实时数据分析系统的重要性也不言而喻.但是当数据量巨大的情况下,企业对数据技 ...

『平时多流汗,战时少流血』分享嘉宾:贾元乔菜鸟高级数据技术专家编辑整理:夏飞飞内容来源:Flink Forward ASIA 出品平台:DataFunTalk 注:转载请在公众号后台回复&q ...

随着互联网飞速发展,企业业务种类会越来越多,业务数据量会越来越大,当发展到一定规模时,传统的数据存储结构逐渐无法满足企业需求,实时数据仓库就变成了一个必要的基础服务.以维表 Join 为例,数据在业务 ...

摘要:这世间青山灼灼星光杳杳,秋雨淅淅晚风慢慢,也抵不过公子眉目间的星辰和大数据视频. 我趁老婆洗澡,看了一眼她手机, 发现她和丈母娘的语音聊天. 老婆说:今天胸口闷得慌, 老婆说:待会儿把他揍一顿出 ...

人类为什么会做梦?这在科学界目前是一个存在分歧的话题:虽然很难具体证明人类为什么会做梦,但在神经科学领域充满了各种假说.受用于训练深度神经网络的技术启发,塔夫茨大学神经科学研究助理教授 Erik Ho ...

好未来基于DorisDB的全新实时数仓实践