Amazon web services LightGBM在AWS上速度非常慢,但不是本地速度
我有一个i7 9700处理器@3.00GHz在我的本地机器上,我能够在大约5小时内调整和训练我的LightGBM模型。当我在AWS EC2实例上重复此过程时,我发现训练时间明显变慢,完成调整过程可能需要20个小时 我使用的数据集大约有20个特征和200万行,这是我用于模型的参数:Amazon web services LightGBM在AWS上速度非常慢,但不是本地速度,amazon-web-services,machine-learning,xgboost,lightgbm,Amazon Web Services,Machine Learning,Xgboost,Lightgbm,我有一个i7 9700处理器@3.00GHz在我的本地机器上,我能够在大约5小时内调整和训练我的LightGBM模型。当我在AWS EC2实例上重复此过程时,我发现训练时间明显变慢,完成调整过程可能需要20个小时 我使用的数据集大约有20个特征和200万行,这是我用于模型的参数: model_params = {"boosting_type": "gbdt", "num_threads": 16, "colsample_byt
model_params = {"boosting_type": "gbdt",
"num_threads": 16,
"colsample_bytree": 0.51,
"importance_type": "split",
"learning_rate": 0.1,
"max_depth": -1,
"min_child_samples": 35,
"min_child_weight": 0.001,
"min_split_gain": 0.11,
"n_estimators": 5000,
"num_leaves": 412,
"objective": "regression_l1",
"random_state": 1337,
"reg_alpha": 0.3,
"reg_lambda": 3.5,
"subsample": 0.59,
"subsample_for_bin": 200000,
"subsample_freq": 0,
"verbose": -1}
我应该做些什么来提高AWS的性能?您找到问题所在了吗?您找到问题所在了吗?