大数据Spark“蘑菇云”行动第55课：在线广告点击流处理代码的分析和实现

大数据Spark“蘑菇云”行动第55课：在线广告点击流处理代码的分析和实现 1 在线广告点击流处理代码的分析 1 在线广告点击流处理代码的实战

 

1，Driver挂掉了怎么办？ 2，RDD挂掉怎么办？ 3，数据的WAL

 

 

作业：

实现最原始的广告点击功能并写数据到数据库中

段智华 认证博客专家 Spark AI 企业级AI技术 本人从事大数据人工智能开发和运维工作十余年，码龄5年，深入研究Spark源码，参与王家林大咖主编出版Spark+AI系列图书5本，清华大学出版社最新出版2本新书《Spark大数据商业实战三部曲：内核解密|商业案例|性能调优》第二版、《企业级AI技术内幕：深度学习框架开发+机器学习案例实战+Alluxio解密》，《企业级AI技术内幕》新书分为盘古人工智能框架开发专题篇、机器学习案例实战篇、分布式内存管理系统Alluxio解密篇。Spark新书第二版以数据智能为灵魂，包括内核解密篇，商业案例篇，性能调优篇和Spark+AI解密篇。从2015年开始撰写博文，累计原创1059篇，博客阅读量达155万次