【深度解密Spark性能优化之道】

  • 发布时间:
    2025-06-09 22:22:56
  • 文件大小:
    共计 66 个文件,合计:485.4MB
  • 资源来源:
    夸克网盘夸克网盘
  • 资源售价:
    积分5积分
・本站会员获取资源无需消耗积分。
・获取资源后可以在「个人中心」24 小时内无理由退积分。
为防止资源链接失效,请及时转存文件。
资源详情
深度解密Spark性能优化之道。 课程通过实战案例解析和性能调优技巧的讲解,帮助学员提升大数据处理系统的性能和效率。课程内容涵盖了Spark性能调优的各个方面,包括内存管理、并行度设置、数据倾斜处理、Shuffle调优、资源配置等关键技术和策略。学员将通过实际案例的演示和分析,掌握解决Spark应用性能问题的方法和技巧,从而提升数据处理效率,优化应用性能。无论您是初学者还是有一定经验的大数据工程师,本课程都将为您提供宝贵的实战经验和实用技能,助您成为Spark性能调优的专家。 ├── 01-课前必学 (3讲) ├── 02-原理篇 (5讲) ├── 03-通用性能调优篇 (12讲) ├── 04-Spark SQL 性能调优篇 (4讲) ├── 05-结束语(2讲)
📢 以下文件由夸克网盘用户[夸父*011]于2024-12-11分享(只展示部分的文件和文件夹)
深度解密Spark性能优化之道485.4MB
01-课前必学 (3讲)27.71MB
01丨性能调优的必要性:Spark本身就很快,为啥还需要我调优?.m4a5.87MB
01丨性能调优的必要性:Spark本身就很快,为啥还需要我调优?.pdf2.03MB
02丨性能调优的本质:调优的手段五花八门,该从哪里入手?.m4a6.46MB
02丨性能调优的本质:调优的手段五花八门,该从哪里入手?.pdf2.16MB
开篇词丨Spark性能调优,你该掌握这些“套路”.m4a5.09MB
开篇词丨Spark性能调优,你该掌握这些“套路”.pdf6.1MB
02-原理篇 (5讲)66.11MB
03丨RDD:为什么你必须要理解弹性分布式数据集?.m4a7.07MB
03丨RDD:为什么你必须要理解弹性分布式数据集?.pdf5.44MB
04丨DAG与流水线:到底啥叫“内存计算”?.m4a7.48MB
04丨DAG与流水线:到底啥叫“内存计算”?.pdf2.23MB
05丨调度系统:“数据不动代码动”到底是什么意思?.m4a11.55MB
05丨调度系统:“数据不动代码动”到底是什么意思?.pdf8.93MB
06丨存储系统:空间换时间,还是时间换空间?.m4a8.85MB
06丨存储系统:空间换时间,还是时间换空间?.pdf2.6MB
07丨内存管理基础:Spark如何高效利用有限的内存空间?.m4a9.26MB
07丨内存管理基础:Spark如何高效利用有限的内存空间?.pdf2.69MB
03-通用性能调优篇 (12讲)170.28MB
08丨应用开发三原则:如何拓展自己的开发边界?.m4a10.93MB
08丨应用开发三原则:如何拓展自己的开发边界?.pdf1.92MB
09丨调优一筹莫展,配置项速查手册让你事半功倍!(上).m4a11.24MB
09丨调优一筹莫展,配置项速查手册让你事半功倍!(上).pdf1.96MB
10丨调优一筹莫展,配置项速查手册让你事半功倍!(下).m4a9.22MB
10丨调优一筹莫展,配置项速查手册让你事半功倍!(下).pdf5.18MB
11丨Shuffle的工作原理:为什么说Shuffle是一时无两的性能杀手?.m4a9.69MB
11丨Shuffle的工作原理:为什么说Shuffle是一时无两的性能杀手?.pdf23.4MB
12丨广播变量(一):克制Shuffle,如何一招制胜!.m4a7.24MB
12丨广播变量(一):克制Shuffle,如何一招制胜!.pdf4.13MB
13丨广播变量(二):有哪些途径让SparkSQL选择BroadcastJoins?.m4a7.4MB
13丨广播变量(二):有哪些途径让SparkSQL选择BroadcastJoins?.pdf1.5MB
14丨CPU视角:如何高效地利用CPU?.m4a10.31MB
14丨CPU视角:如何高效地利用CPU?.pdf7.18MB
15丨内存视角(一):如何最大化内存的使用效率?.m4a8.48MB
15丨内存视角(一):如何最大化内存的使用效率?.pdf1.48MB
16丨内存视角(二):如何有效避免Cache滥用?.m4a10.61MB
16丨内存视角(二):如何有效避免Cache滥用?.pdf3.83MB
17丨内存视角(三):OOM都是谁的锅?怎么破?.m4a8.14MB
17丨内存视角(三):OOM都是谁的锅?怎么破?.pdf4.5MB
18丨磁盘视角:如果内存无限大,磁盘还有用武之地吗?.m4a7.58MB
18丨磁盘视角:如果内存无限大,磁盘还有用武之地吗?.pdf4.6MB
19丨网络视角:如何有效降低网络开销?.m4a7.23MB
19丨网络视角:如何有效降低网络开销?.pdf2.53MB
04-Spark SQL 性能调优篇 (4讲)209.42MB
20丨RDD和DataFrame:既生瑜、何生亮.m4a7.22MB
20丨RDD和DataFrame:既生瑜、何生亮.pdf5.25MB
21丨Catalyst逻辑计划:你的SQL语句是怎么被优化的?(上).m4a8.52MB
21丨Catalyst逻辑计划:你的SQL语句是怎么被优化的?(上).pdf5.1MB
22丨Catalyst物理计划:你的SQL语句是怎么被优化的(下)?.m4a8.07MB
22丨Catalyst物理计划:你的SQL语句是怎么被优化的(下)?.pdf8.33MB
23丨钨丝计划:Tungsten给开发者带来了哪些福报?.m4a10MB
23丨钨丝计划:Tungsten给开发者带来了哪些福报?.pdf5.78MB
24丨Spark3.m4a13.35MB
24丨Spark3.pdf5.41MB
25丨Spark3.m4a10.14MB
25丨Spark3.pdf3.51MB
26丨JoinHints指南:不同场景下,如何选择Join策略?.m4a14.02MB
26丨JoinHints指南:不同场景下,如何选择Join策略?.pdf7.06MB
27丨大表Join小表:广播变量容不下小表怎么办?.m4a15.11MB
27丨大表Join小表:广播变量容不下小表怎么办?.pdf3.91MB
28丨大表Join大表(一):什么是“分而治之”的调优思路?.m4a11.33MB
28丨大表Join大表(一):什么是“分而治之”的调优思路?.pdf4.3MB
29丨大表Join大表(二):什么是负隅顽抗的调优思路?.m4a12.61MB
29丨大表Join大表(二):什么是负隅顽抗的调优思路?.pdf6.19MB
30丨应用开发:北京市小客车(汽油车)摇号趋势分析.m4a13.82MB
30丨应用开发:北京市小客车(汽油车)摇号趋势分析.pdf3.92MB
31丨性能调优:手把手带你提升应用的执行性能.m4a19.84MB
31丨性能调优:手把手带你提升应用的执行性能.pdf6.63MB
05-结束语(2讲)11.89MB
结束语丨在时间面前,做一个笃定学习的人.m4a8.56MB
结束语丨在时间面前,做一个笃定学习的人.pdf3.33MB
网站声明:
1. 该网盘资源的安全性和完整性需要您自行判断,点击下载地址直接跳转到网盘官方页面。本站链接通过程序自动收集互联网公开分享链接,本站不储存、复制、传播任何网盘文件,也不提供下载服务。
2. 本站遵守相关法律法规,坚决杜绝一切违规不良信息,如您发现任何涉嫌违规的网盘信息,请立即向网盘官方网站举报,并及时反馈给我们进行屏蔽删除。
3. 本站高度重视知识产权保护和个人隐私保护,如有网盘链接侵犯您的合法权益,请立即向网盘官方网站举报,并参见本站《版权说明》提供书面材料联系我们屏蔽删改。
资源评论 AUP主 M管理员