作者matlabking (Jason)
看板DataScience
標題[討論] 有人XGboost裝GPU版本的嗎?
時間Fri Mar 16 06:18:36 2018
桃園早安 衝個人氣
請問版上板上有人Extreme Boostings裝GPU版本的嗎?
昨天要裝發現設定好麻煩
有人裝好了變超級霹靂無敵強嗎?
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 180.217.147.227
※ 文章網址: https://webptt.com/m.aspx?n=bbs/DataScience/M.1521152318.A.0D6.html
1F:→ celestialgod: 我忘了.. 不過微軟的lightgbm GPU滿好裝的,也快不 03/16 09:02
2F:→ celestialgod: 少 03/16 09:02
3F:→ goldflower: lightgbm超級霹靂無敵快 不過我跑的時候大致上都輸 03/17 08:48
4F:→ goldflower: xgboost一點 不過值得注意的是類似的方法我跑最強 03/17 08:49
5F:→ goldflower: 的是scikit-learn的gbrt XD 本來想拿來當base-line QQ 03/17 08:50
看來必須裝了 小問題是我的GPU只有8G,恐怕跑不了大數據,並且scikit-learn好像
也吞不下大數據,不知道大大們怎麼解決
6F:→ goldflower: 對了我說的輸是performance輸 速度上lightgbm屌打 03/17 14:58
7F:→ goldflower: 吃不下可以分批讀啊XD 03/17 14:58
8F:→ matlabking: 哈哈 謝謝 請問分批讀進GPU訓練有範例教程嗎 03/17 15:29
9F:→ goldflower: 我講的不是什麼高級方法啦 比如不要一次讀全部資料到 03/17 16:23
10F:→ goldflower: 記憶體裡 讀一部分訓練完再讀另一部份訓練這樣 然後 03/17 16:23
11F:→ goldflower: 與時間無關就記得把shuffle做好這樣 我倒是不清楚有 03/17 16:23
12F:→ goldflower: 沒有把這部分聰明解決的方法@@ 03/17 16:23
13F:→ matlabking: 好喔 謝謝 我再研究看看 03/17 17:08
14F:推 lionell: CPU夠多的話,XGB GPU版大概跟LGB CPU差不多快 03/21 07:28
15F:推 lionell: LGB CPU nthread=16時大致上會跟XGB GPU差不多 03/21 07:31
16F:→ lionell: CPU不夠多的話就不一定了 03/21 07:32
17F:→ goldflower: 我印象中lgb在單一cpu速度已經明顯勝過xgb了說@@ 03/21 18:04
18F:→ goldflower: 不過lgb是在後面收斂的時候會很快就結束每個pass 03/21 18:05
19F:→ goldflower: 所以可能前期差不多吧 03/21 18:05
※ 編輯: matlabking (140.116.20.65), 03/26/2018 22:31:09
20F:→ f496328mm: 最近裝了 XGB-GPU 版本, 超級快阿阿阿 03/27 10:58
21F:→ f496328mm: 不過 ram 是個問題 沒控制好就直接死給你看 03/27 10:58
22F:推 mirage7714: 想請問以下記憶體設定要怎麼設呢? 04/28 11:26