Table 5 Comparison of predictive... | Emerald Publishing

Table 5

Comparison of predictive accuracy metrics (MASE, RMASE and MAPE)

Models	Test (Out of sample period)
Models	Period	MASE	RMSE	MAPE
BDI
ARIMA(0,1,1)	2017	0.116	0.299	0.151
Reg with ARMA	2017	0.122	0.338	0.152
TBATS	2017	0.110	0.310	0.179
HW additive	2017	0.109	0.263	0.197
HW multiplicative	2017	0.074	0.182*	0.135
ANN(lag 2, c(10,11))	2017	0.076	0.195	0.153
System dynamics	2017	0.067*	0.185	0.133*
Handysize
ARIMA(1,1,4) (1,0,0)[12]	2017	0.141	0.127	0.125
Reg with ARMA	2017	0.094	0.094	0.083
TBATS	2017	1.000	0.087	0.089
HW additive	2017	0.086	0.092	0.074
HW multiplicative	2017	0.160	0.143	0.107
ANN(lag 2, c(9,9))	2017	0.053	0.059	0.048
System dynamics	2017	0.047*	0.055*	0.043*
Panamax
ARIMA(2,1,1) (0,0,1)[12]	2017	0.183	0.344	0.251
Reg with ARMA	2017	0.174	0.332	0.239
TBATS	2017	0.161	0.308	0.220
HW additive	2017	0.068	0.142	0.093
HW multiplicative	2017	0.042	0.081	0.060
ANN(lag 2, c(9,9))	2017	0.064	0.126	0.094
System dynamics	2017	0.036*	0.078*	0.054*
Capesize
ARIMA(2,1,1) (0,0,1)[12]	2017	0.151	0.564	0.339
Reg with ARMA	2017	0.110	0.431	0.245
TBATS	2017	0.140	0.526	0.315
HW additive	2017	0.098	0.378	0.224
HW multiplicative	2017	0.122	0.457	0.275
ANN(lag 2, c(9,9))	2017	0.036	0.151	0.082
System dynamics	2017	0.034*	0.134*	0.082*
Supramax
ARIMA(2,1,1) (0,0,1)[12]	2017	0.125	0.189	0.165
Reg with ARMA	2017	0.094	0.156	0.123
TBATS	2017	0.083	0.129	0.111
HW additive	2017	0.059	0.104	0.077
HW multiplicative	2017	0.066	0.104	0.087
ANN(lag 2, c(9,9))	2017	0.050*	0.076*	0.069*
System dynamics	2017	0.053	0.093	0.075

Models	Test (Out of sample period)
Models	Period	MASE	RMSE	MAPE
BDI
ARIMA(0,1,1)	2017	0.116	0.299	0.151
Reg with ARMA	2017	0.122	0.338	0.152
TBATS	2017	0.110	0.310	0.179
HW additive	2017	0.109	0.263	0.197
HW multiplicative	2017	0.074	0.182*	0.135
ANN(lag 2, c(10,11))	2017	0.076	0.195	0.153
System dynamics	2017	0.067*	0.185	0.133*
Handysize
ARIMA(1,1,4) (1,0,0)[12]	2017	0.141	0.127	0.125
Reg with ARMA	2017	0.094	0.094	0.083
TBATS	2017	1.000	0.087	0.089
HW additive	2017	0.086	0.092	0.074
HW multiplicative	2017	0.160	0.143	0.107
ANN(lag 2, c(9,9))	2017	0.053	0.059	0.048
System dynamics	2017	0.047*	0.055*	0.043*
Panamax
ARIMA(2,1,1) (0,0,1)[12]	2017	0.183	0.344	0.251
Reg with ARMA	2017	0.174	0.332	0.239
TBATS	2017	0.161	0.308	0.220
HW additive	2017	0.068	0.142	0.093
HW multiplicative	2017	0.042	0.081	0.060
ANN(lag 2, c(9,9))	2017	0.064	0.126	0.094
System dynamics	2017	0.036*	0.078*	0.054*
Capesize
ARIMA(2,1,1) (0,0,1)[12]	2017	0.151	0.564	0.339
Reg with ARMA	2017	0.110	0.431	0.245
TBATS	2017	0.140	0.526	0.315
HW additive	2017	0.098	0.378	0.224
HW multiplicative	2017	0.122	0.457	0.275
ANN(lag 2, c(9,9))	2017	0.036	0.151	0.082
System dynamics	2017	0.034*	0.134*	0.082*
Supramax
ARIMA(2,1,1) (0,0,1)[12]	2017	0.125	0.189	0.165
Reg with ARMA	2017	0.094	0.156	0.123
TBATS	2017	0.083	0.129	0.111
HW additive	2017	0.059	0.104	0.077
HW multiplicative	2017	0.066	0.104	0.087
ANN(lag 2, c(9,9))	2017	0.050*	0.076*	0.069*
System dynamics	2017	0.053	0.093	0.075

Note(s): *Italic figures indicate the minimum error rate in given column