打印 上一主题 下一主题

[百度网盘]高性能数据处理训练营 Hive on Spark调优与性能优化揭秘 构建高效大数据处理平台

[复制链接]
跳转到指定楼层
楼主
admin 发表于 2023-7-7 00:05:51
1808 3
高性能数据处理训练营 Hive on Spark调优与性能优化揭秘 构建高效大数据处理平台

===============课程介绍===============

在课程中,我学到了许多性能优化的技巧和方法。我学会了如何合理地配置Spark集群资源,优化数据倾斜问题,利用分区和分桶进行数据优化,以及如何使用索引和压缩技术提高查询效率。我还学到了如何监控和调试Hive on Spark作业,识别潜在的性能瓶颈,并采取相应的优化措施。

这门课程的亮点之一是实战训练。通过参与实际的大数据处理项目,我能够将所学的调优技巧应用到实际场景中。这使我能够更好地理解和掌握课程中所介绍的概念和技术,并加深了对Hive on Spark调优与性能优化的实际运用能力。

===============课程目录===============


├─笔记.zip
├─资料.zip
(1)\视频;目录中文件数:27个
├─01_课程介绍.mp4
├─02_基础情况说明.mp4
├─03_集群的配置和规划.mp4
├─04_Yarn的配置.mp4
├─05_Spark的配置的说明(1).mp4
├─05_Spark的配置的说明.mp4
├─06_Spark中Executor的配置.mp4
├─07_Spark中Executor的个数配置.mp4
├─08_Spark中driver的配置.mp4
├─09_Spark配置的案例实操.mp4
├─10_Hive的执行计划.mp4
├─11_启动进程.mp4
├─12_分组聚合优化的原理.mp4
├─13_分组聚合优化的实操.mp4
├─14_Join优化的说明.mp4
├─15_MapJoin的优化实操.mp4
├─16_Sort_Bucket_Join实操.mp4
├─17_数据倾斜的优化说明.mp4
├─18_分组聚合优化的方案.mp4
├─19_分组聚合优化的实操.mp4
├─20_Join倾斜的说明.mp4
├─21_Join倾斜实操1.mp4
├─22_Join倾斜实操2.mp4
├─23_并行度说明.mp4
├─24_Map端并行度的说明.mp4
├─25_Reduce端并行度的说明.mp4
├─26_小文件和其他优化.mp4


游客,如果您要查看本帖隐藏内容请回复

吾爱编程网 - 免责声明
1、吾爱编程网为非营利性网站,全站所有资料仅供网友个人学习使用,禁止商用
2、本站所有文档、视频、书籍等资料均由网友分享,本站只负责收集不承担任何技术及版权问题
3、如本帖侵犯到任何版权问题,请立即告知本站,本站将及时予与删除下载链接并致以最深的歉意
4、本帖部分内容转载自其它媒体,但并不代表本站赞同其观点和对其真实性负责
5、一经注册为本站会员,一律视为同意网站规定,本站管理员及版主有权禁止违规用户
6、其他单位或个人使用、转载或引用本文时必须同时征得该帖子作者和吾爱编程网的同意
7、吾爱编程网管理员和版主有权不事先通知发贴者而删除本文




上一篇:尚硅谷大数据项目之电商数仓5.0 优化数据仓库架构与海量数据处理最佳策略 全面可视化
下一篇:K8s最佳实践Kubernetes-Rancher2.x 构建可靠的容器编排生态系统 持续交付与自动化运维
收藏
收藏
支持
支持
反对
反对
回复

使用道具 举报

地板
ljhaabb 发表于 2023-7-21 16:57:30
哥顶的不是帖子,是寂寞!支持吾爱编程网!
回复

使用道具 举报

板凳
mayongz2022 发表于 2023-7-9 08:13:18
啥也不说了,楼主就是给力!支持吾爱编程网!
回复

使用道具 举报

沙发
kongmengshu 发表于 2023-7-8 02:03:32
看了LZ的帖子,我只想说一句很好很强大!支持吾爱编程网!
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

站长推荐上一条 /1 下一条

返回顶部 返回列表

平台简介

吾爱编程网:http://www.52pg.net/是IT技能学习交流平台,我们提供了丰富的移动端开发、php开发、web前端开发、android开发、Java开发、Python开发、大数据开发、区块链开发、人工智能开发以及html5等大量的实战视频教程资源。(如果我们有侵犯了您权益的资源请联系我们删除)

点击这里给我发消息|Archiver|手机版|小黑屋|站点地图|吾爱编程  |网站地图

Powered by Discuz! X3.2??? 2017-2020 Comsenz Inc.??吾爱编程网