spark常见问题解决方法
对于Spark程序优化，应从如下几点进行： 1. 通过监控CPU、内存、网络、IO、GC、应用指标等数据，切实找到系统的瓶颈点。 2. 统筹全局，制定相应的解决方案，解决问题的思路是否清晰准确很重要，切勿『头疼医头，脚疼医脚』，应总体考虑把握。
...
Spark 学习笔记
以下是在学习和使用spark过程中遇到的一些问题，记录下来。
1. 首先来说说spark任务运行完后查错最常用的一个命令，那就是把任务运行日志down下来。 程序存在错误，将日志down下来查看具体原因！down日志命令：yarn logs -applicationId app_id
2.
...
Spark资料链接汇总
【SparkX】
基于Spark Graphx的大规模用户图计算和应用
快刀初试：Spark GraphX在淘宝的实践
Spark中文手册9：Spark GraphX编程指南
Spark Graphx:构建graph和聚合消息
GraphX Programming Guide
Spark的Graph
...
Pelican环境搭建&Markdown学习小记
Pelican环境搭建笔记
将md文档编译为html,并输出到output目录命令：
1pelican content
在命令行里面切换到output目录下面，启动Pelican的本地web服务命令：
1python -m SimpleHTTPServer
pelican所有插件安装均在pe
...