开发者

Spark 调优 (翻译自Tuning Spark)

开发者 https://www.devze.com 2018-01-02 23:34 出处:原创
由于大多数Spark计算任务是在内存中运行计算,任何集群中的资源限制都可能成为Spark程序的瓶颈,比如:CPU、网络、带宽、内存。通常情况下,如果内存能容纳所处理数据,主要的瓶颈则仅是网络带宽。但有些时候您也需要
0

精彩评论

暂无评论...
验证码 换一张
取 消

关注公众号