Small-Sample Error Estimation for Bagged Classification Rules

Vu, T. T.; Braga-Neto, U. M.

doi:10.1155/2010/548906

EURASIP Journal on Advances in Signal Processing

Table 2 Bias, variance (standard deviation), and RMS for different error estimators, with different base classification rules, for lung cancer gene expression data, and dimensionality .

From: Small-Sample Error Estimation for Bagged Classification Rules

Rule		stat	resb	boot	bresb	loo	b632	oob	sbresb	b632plus	cv5
lda	20	bias	0.0243	0.0238	0.0070	0.0075	0.0061	0.0103	0.0294	0.0094	0.0106
		sd	0.0938	0.0938	0.0827	0.0989	0.0923	0.0988	0.0910	0.0932	0.1025
		rms	0.0969	0.0967	0.0830	0.0992	0.0925	0.0993	0.0956	0.0937	0.1031
lda	40	bias	0.0118	0.0109	0.0012	0.0017	0.0025	0.0044	0.0273	0.0033	0.0045
		sd	0.0675	0.0655	0.0628	0.0684	0.0656	0.0685	0.0652	0.0656	0.0694
		rms	0.0685	0.0664	0.0628	0.0684	0.0657	0.0686	0.0707	0.0657	0.0695
lda	60	bias	0.0092	0.0067	0.0023	0.0004	0.0009	0.0015	0.0235	0.0012	0.0020
		sd	0.0606	0.0587	0.0570	0.0608	0.0590	0.0608	0.0586	0.0590	0.0610
		rms	0.0613	0.0591	0.0570	0.0608	0.0591	0.0609	0.0632	0.0590	0.0610
cart	20	bias	0.0945	0.0321	0.0025	0.0100	0.0145	0.0139	0.0076	0.0031	0.0017
		sd	0.0502	0.0852	0.0623	0.0916	0.0683	0.0945	0.0676	0.0811	0.0849
		rms	0.1069	0.0911	0.0623	0.0921	0.0699	0.0955	0.0681	0.0812	0.0849
cart	40	bias	0.0926	0.0226	0.0230	0.0071	0.0198	0.0088	0.0141	0.0071	0.0022
		sd	0.0384	0.0630	0.0439	0.0694	0.0504	0.0705	0.0472	0.0577	0.0654
		rms	0.1003	0.0670	0.0496	0.0698	0.0542	0.0710	0.0493	0.0581	0.0655
cart	60	bias	0.0938	0.0202	0.0277	0.0043	0.0218	0.0068	0.0210	0.0103	0.0012
		sd	0.0335	0.0544	0.0397	0.0590	0.0438	0.0597	0.0414	0.0496	0.0571
		rms	0.0996	0.0580	0.0484	0.0592	0.0490	0.0601	0.0464	0.0507	0.0571
3nn	20	bias	0.0483	0.0474	0.0185	0.0114	0.0122	0.0132	0.0027	0.0238	0.0040
		sd	0.0552	0.0803	0.0529	0.0876	0.0677	0.0870	0.0623	0.0765	0.0787
		rms	0.0734	0.0932	0.0561	0.0884	0.0688	0.0880	0.0624	0.0802	0.0788
3nn	40	bias	0.0489	0.0236	0.0270	0.0043	0.0031	0.0055	0.0094	0.0027	0.0004
		sd	0.0435	0.0602	0.0411	0.0626	0.0519	0.0624	0.0484	0.0555	0.0593
		rms	0.0655	0.0646	0.0492	0.0627	0.0520	0.0626	0.0493	0.0555	0.0593
3nn	60	bias	0.0500	0.0198	0.0317	0.0031	0.0059	0.0036	0.0147	0.0009	0.0028
		sd	0.0381	0.0526	0.0383	0.0555	0.0459	0.0553	0.0439	0.0486	0.0514
		rms	0.0629	0.0562	0.0497	0.0556	0.0462	0.0555	0.0463	0.0486	0.0514

Back to article page