大數據量的情況下用pyspark對數據進行處理的時候
pycharm運行會出現ERROR Utils: Uncaught exception in thread stdout writer for python錯誤
需要修改JVM參數
打開pycharm的安裝目錄 C:\Program Files (x86)\JetBrains\PyCharm 2016.2.3\bin下文件pycharm.exe.vmoptions
修改默認(版本2016.2)的
-server
-Xms128m
-Xmx512m
為
-server
-Xms256m
-Xmx1024m