李小萌资源网 大数据云计算 [项目实战] 2017最新某团购网站大型离线电商数据分析平台实战演练视频教程配套软件文档齐全 138课


[项目实战] 2017最新某团购网站大型离线电商数据分析平台实战演练视频教程配套软件文档齐全 138课

2019-08-22 1245
薛海军
资源介绍

[项目实战] 2017最新某团购网站大型离线电商数据分析平台实战演练视频教程配套软件文档齐全 138课
2017最新某团购网站的大型离线电商数据分析平台的实战演练视频教程配套软件文档齐全 138课目录

第一章 大数据集群搭建
1.1、课程介绍.mp4
1.2、CentOS 6.4集群搭建-1.mp4
1.3、CentOS 6.4集群搭建-2.mp4
1.4、hadoop-2.5.0-cdh5.3.6集群搭建.mp4
1.5、hive-0.13.1-cdh5.3.6安装.mp4
1.6、zookeeper-3.4.5-cdh5.3.6集群搭建.mp4
1.7、kafka_2.9.2-0.8.1集群搭建.mp4
1.8、flume-ng-1.5.0-cdh5.3.6安装.mp4
1.9、离线日志采集流程介绍.mp4
1.10、实时数据采集流程介绍.mp4
1.11、Spark 1.5.1客户端安装以及基于YARN的提交模式.mp4

第二章 用户访问session分析
2.1、模块介绍.mp4
2.2、基础数据结构以及大数据平台架构介绍.mp4
2.3、需求分析.mp4
2.4、技术方案设计.mp4
2.5、数据表设计.mp4
2.6、Eclipse工程搭建以及工具类说明.mp4
2.7、开发配置管理组件.mp4
2.8、JDBC原理介绍以及增删改查示范.mp4
2.9、数据库连接池原理.mp4
2.10、单例设计模式.mp4
2.11、内部类以及匿名内部类.mp4
2.12、开发JDBC辅助组件(上).mp4
2.13、开发JDBC辅助组件(下).mp4
2.14、JavaBean概念讲解.mp4
2.15、DAO模式讲解以及TaskDAO开发.mp4
2.16、工厂模式讲解以及DAOFactory开发.mp4
2.17、JSON数据格式讲解以及fastjson介绍.mp4
2.18、Spark上下文构建以及模拟数据生成.mp4
2.19、按session粒度进行数据聚合.mp4
2.20、按筛选参数对session粒度聚合数据进行过滤.mp4
2.21、session聚合统计之自定义Accumulator.mp4
2.22、session聚合统计之重构实现思路与重构session聚合.mp4
2.23、session聚合统计之重构过滤进行统计.mp4
2.24、session聚合统计之计算统计结果并写入MySQL.mp4
2.25、session聚合统计之本地测试.mp4
2.26、session聚合统计之使用Scala实现自定义Accumulator.mp4
2.27、session随机抽取之实现思路分析.mp4
2.28、session随机抽取之计算每天每小时session数量.mp4
2.29、session随机抽取之按时间比例随机抽取算法实现.mp4
2.30、session随机抽取之根据随机索引进行抽取.mp4
2.31、session随机抽取之获取抽取session的明细数据.mp4
2.32、session随机抽取之本地测试.mp4
2.33、top10热门品类之需求回顾以及实现思路分析.mp4
2.34、top10热门品类之获取session访问过的所有品类.mp4
2.35、top10热门品类之计算各品类点击、下单和支付的次数.mp4
2.36、top10热门品类之join品类与点击下单支付次数.mp4
2.37、top10热门品类之自定义二次排序key.mp4
2.38、top10热门品类之进行二次排序.mp4
2.39、top10热门品类之获取top10品类并写入MySQL.mp4
2.40、top10热门品类之本地测试.mp4
2.41、top10热门品类之使用Scala实现二次排序.mp4
2.42、top10活跃session之开发准备以及top10品类RDD生成.mp4
2.43、top10活跃session之计算top10品类被各sessoin点击的次数.mp4
2.44、top10活跃session之分组取TopN算法获取top10活跃session.mp4
2.45、top10活跃session之本地测试以及阶段总结.mp4

第三章 企业级性能调优、troubleshooting经验与数据倾斜解决方案
3.1、性能调优之在实际项目中分配更多资源.mp4
3.2、性能调优之在实际项目中调节并行度.mp4
3.3、性能调优之在实际项目中重构RDD架构以及RDD持久化.mp4
3.4、性能调优之在实际项目中广播大变量.mp4
3.5、性能调优之在实际项目中使用Kryo序列化.mp4
3.6、性能调优之在实际项目中使用fastutil优化数据格式.mp4
3.7、性能调优之在实际项目中调节数据本地化等待时长.mp4
3.8、JVM调优之原理概述以及降低cache操作的内存占比.mp4
3.9、JVM调优之调节executor堆外内存与连接等待时长.mp4
3.10、Shuffle调优之原理概述.mp4
3.11、Shuffle调优之合并map端输出文件.mp4
3.12、Shuffle调优之调节map端内存缓冲与reduce端内存占比.mp4
3.13、Shuffle调优之HashShuffleManager与SortShuffleManager.mp4
3.14、算子调优之MapPartitions提升Map类操作性能.mp4
3.15、算子调优之filter过后使用coalesce减少分区数量.mp4
3.16、算子调优之使用foreachPartition优化写数据库性能.mp4
3.17、算子调优之使用repartition解决Spark SQL低并行度的性能问.mp4
3.18、算子调优之reduceByKey本地聚合介绍.mp4
3.19、troubleshooting之控制shuffle reduce端缓冲大小以避免OOM.mp4
3.20、troubleshooting之解决JVM GC导致的shuffle文件拉取失败.mp4
3.21、troubleshooting之解决YARN队列资源不足导致的application直接失败.mp4
3.22、troubleshooting之解决各种序列化导致的报错.mp4
3.23、troubleshooting之解决算子函数返回NULL导致的问题.mp4
3.24、troubleshooting之解决yarn-client模式导致的网卡流量激增问题.mp4
3.25、troubleshooting之解决yarn-cluster模式的JVM栈内存溢出问题.mp4
3.26、troubleshooting之错误的持久化方式以及checkpoint的使用.mp4
3.27、数据倾斜解决方案之原理以及现象分析.mp4
3.28、数据倾斜解决方案之聚合源数据以及过滤导致倾斜的key.mp4
3.29、数据倾斜解决方案之提高shuffle操作reduce并行度.mp4
3.30、数据倾斜解决方案之使用随机key实现双重聚合.mp4
3.31、数据倾斜解决方案之将reduce join转换为map join.mp4
3.32、数据倾斜解决方案之sample采样倾斜key单独进行join.mp4
3.33、数据倾斜解决方案之使用随机数以及扩容表进行join.mp4

第四章 页面单跳转化率统计
4.1、模块介绍.mp4
4.2、需求分析、技术方案设计、数据表设计.mp4
4.3、编写基础代码.mp4
4.4、面切片生成以及页面流匹配算法实现.mp4
4.5、计算页面流起始页面的pv.mp4
4.6、计算页面切片的转化率.mp4
4.7、将页面切片转化率写入MySQL.mp4
4.8、本地测试.mp4
4.9、生产环境测试.mp4
4.10





百度网盘可以用手机平板电脑在线播放,也可以下载之后播放

本帖资源评论
[大数据] 51CT0大数据全套教程
小象学院量化交易策略编写及系统搭建
数据挖掘与分析应用+电商数据化运营+轻松驾驭统计学+EXCEL大数据分析师视频教程合集
数据可视化tableau精品课程零基础到精通(全套)
[Hadoop] 极客学院 大数据存储技术 创建本地和托管 Hadoop 集群操作视频 来源和安装简单介绍3集
高阶互联网大厂BI商业智能实战 智能BI+Tableau+全面数据可视化+用户行为全面分析
[数据挖掘] 数据挖掘与分析应用+电商数据化运营+轻松驾驭统计学+EXCEL大数据分
小象《金融数据分析》第二期
轻松驾驭统计学 数据分析必备技能 12集 视频教程 教学视频 百度云网盘下载
价值999元的MATLAB金融量化策略实战
大数据架构师成长之路(视频、课件、代码)
[项目实战] 深入大数据架构师之路,问鼎40万年薪
Storm入门到项目实战
大厂学院SVIP十门合集
云计算视频教程 Flume视频教程分布式的海量日志采集 Flume日志收集利器视频教程
[Hadoop] 分布式数据库HBase-38堂课带你从入门到精通Habse Hadoop大数据开发必备技术-Hbase
老余视频
数据结构与算法] 深度剖析数据结构与算法精品课程入门到高级2019
Hadoop数据仓库HIVE实战编程培训视频教程全程实战教学
[Hadoop] Hadoop大数据:真实电商数据仓库全流程开发详解-VIP全集
没有账号? 注册