集成學習與決策樹，隨機森林概述

集成學習的第一個問題就是如何得到若干個個體學習器。這裏我們有兩種選擇。 I.第一種就是所有的個體學習器都是一個種類的，或者說是同質的。比如都是決策樹個體學習器，或者都是神經網絡個體學習器。 II.第二種是所有的個體學習器不全是一個種類的，或者說是異質的。比如我們有一個分類問題，對訓練集採用支持向量機個體學習器，邏輯迴歸個體學習器和樸素貝葉斯個體學習器來學習，再通過某種結合策略來確定最終的分類強學習

>>阅读原文<<