基於Spark之上的基礎環境設置

1.Ulimit配置 操做系統默認只能打開1024個文件，打開的文件超過這個數發現程序會有「too many open files」的錯誤，1024對於大數據系統來講顯然是不夠的，若是不設置，基本上整個大數據系統是「不可用的」，根本不能用於生產環境。 配置方法以下：node echo "* soft nofile 128000" >> /etc/security/limits.conf echo

>>阅读原文<<