Aug
14
如何画XGBoost里面的决策树？
最近用XGBoost很多, 训练完模型后, 一般只是看看特征重要性(feature importance score)。我对这种黑箱模型一般是不放心的, 所以喜欢把结果尽可能的画出来看看。XGBoost是一种Boosting Tree方法, 模型中每个决策树是可以画出来看看的。以为这是个很简单问题, 后来发现其实坑还挺多的, 这里简单总结一下。
Mar
30
XGBoost VS LightGBM
武林至尊，宝刀屠龙，号令天下，莫敢不从！倚天不出，谁与争锋？想要在Kaggle这样一个拥有来自全世界超过5万数据科学家参与的数据科学竞赛拔得头筹，什么工具才能称作是屠龙刀和倚天剑呢？在当今的数据科学江湖中，XGBoost作为多个Kaggle冠军的首选工具，当之无愧拥有屠龙刀的称号。而开源刚2个月的LightGBM以其轻快敏捷而著称，成为了Kaggle冠军手中的倚天剑。接下来，笔者就以Kaggle的Allstate Claims Severity竞赛来跟大家分享一下这两个工具的使用经验。
