大数据平台常用工具集介绍
相关推荐
-
大数据开发之Hadoop生态6 大核心组件
Hadoop 第一代分布式存储计算框架 Hadoop是一个分布式系统基础架构,由Apache基金会开发,它允许用户在不了解分布式底层细节的情况下,开发分布式程序,充分利用集群的威力高速运算和存储.Ha ...
-
Hive,Hive on Spark和SparkSQL区别
Hive on Mapreduce Hive的原理大家可以参考这篇大数据时代的技术hive:hive介绍,实际的一些操作可以看这篇笔记:新手的Hive指南,至于还有兴趣看Hive优化方法可以看看我总结 ...
-
大数据平台常见开源工具集锦(强烈推荐收藏)
引言 大数据平台是对海量结构化.非结构化.半机构化数据进行采集.存储.计算.统计.分析处理的一系列技术平台.大数据平台处理的数据量通常是TB级,甚至是PB或EB级的数据,这是传统数据仓库工具无法处理完 ...
-
5个常用的大数据可视化分析工具
开发者技术前线 3天前 让一部分开发者看到未来 整理自:侠梦的开发笔记 前言 大数据及移动互联网时代,每一个使用移动终端的人无时无刻不在生产数据,而作为互联网服务提供的产品来说,也在持续不断的积累数据 ...
-
Kafka 集群在马蜂窝大数据平台的优化与应用扩展
马蜂窝技术原创文章,更多干货请订阅公众号:mfwtech Kafka 是当下热门的消息队列中间件,它可以实时地处理海量数据,具备高吞吐.低延时等特性及可靠的消息异步传递机制,可以很好地解决不同系统间数 ...
-
数据中台与传统大数据平台有什么区别?终于有人讲明白了
大数据DT 提供大数据.AI等领域干货学习资源的「宝藏号」,跟50万技术人共同成长,一起玩转大数据.Python.数据分析.数据科学.人工智能!还会有各种好玩又奇葩的数据解读,边学习边吃瓜! 542篇 ...
-
案例分享丨疫情大数据平台的设计
南航疫情大数据平台采用敏捷开发模型.协同开发模式,在微服务架构的支持下,多项开发工作并行开展.通过正确的技术选型.合理的模块划分,最大程度发挥微服务优势. 2020年初新冠肺炎(COVID-19)疫情 ...
-
智慧金融大数据平台总体架构方案
大数据分析平台综述 大数据分析平台总体架构 大数据分析平台演进路线 大数据分析平台实施重点 数据治理管理平台 里面设计的详细的架构方案设计,甚至还有网络拓扑和服务器配置,大家收藏呀!
-
孟庆国:组建大数据平台,这两个问题一定要找准!(可参考)
主 讲 人 : 孟庆国,清华大学公共管理学院教授.博士生导师,现任清华大学国家治理研究院执行院长.中央党校(国家行政学院)兼职教授.主要研究领域包括政府治理.电子政务.数字政府.政务数据治理等. 除了 ...
-
趋势洞察|产业大数据平台,让产业数字化大有可为
继2017年.2019.2020年被写入政府工作报告之后,"数字经济"在2021年的政府报告中再次被写入. 政府工作报告中提到,十四五时期,将加快数字化发展,打造数字经济新优势,协 ...
-
文旅巨华侨城无霸上线“旅游大数据平台”,中国联通匠心打造!资源100%全整合!
2019年10月30日,由中国联通为华侨城集团规划建设的"华侨城数字云图--旅游大数据平台"上线启动. 华侨城旅游大数据平台上线仪式 华侨城集团多年位居全球主题公园集团四强,累计接 ...