Abstract

The objective of this research is to introduce in literature new measures of accuracy for point forecasts (radical of order n of the mean of squared errors, mean for the difference between each predicted value and the mean of the effective values, ratio of radicals of sum of squared errors (RRSSE), the last one being used for forecasts comparisons), different versions of U2 Theil’s statistic) and for forecast intervals (number of intervals including the realization, difference between the realization and the lower limit, the upper one, respectively the interval centre). Some  classical measures of predictions accuracy were assessed for the inflation and unemployment rate forecasts provided for Romania by Institute for Economic Forecasting (IEF) and National Commission of Prognosis (NCP) on the horizon 2010-2012.  Excepting the best forecast, the hierarchy of predictions provided by the classical indicators and by the new ones are different. A novelty in literature is also brought by the methods of building the forecasts intervals. The classical interval based on the root mean squared error method was adapted to the small sample of forecasts. The intervals based on the standard deviation and those constructed using bootstrap technique and bias-corrected-accelerated (BCA) bootstrap method are proposed as an original way in this field.

Resumen

El objetivo de esta investigación es presentar nuevas medidas de precisión para establecer predicciones (radical de orden n del error cuadrático medio, la diferencia media, la media de la diferencia en la predicción de cada valor y la media de los valores efectivos, así como el ratio de radicales de la suma de errores al cuadrado, es decir, RRRSSE por sus siglas en inglés, para las comparaciones predictivas), diferentes versiones del índice de Theil U2) y para los intervalos de predicciones (número de intervalos incluyendo la realización, la diferencia entre la realización y el límite mínimo y máximo respectivamente del centro del intervalo). Evaluamos algunas de las medidas clásicas utilizadas en la precisión de las predicciones de inflación y desempleo en Rumanía, que fueron proporcionadas tanto por el Instituto de Predicciones Económicas (IEF, por sus siglas en inglés) como por la Comisión Nacional de Prognosis (NCP) para el período 2010-2012. Exceptuando las mejores predicciones, la jerarquía de predicciones proporcionada por los indicadores clásicos y modernos es diferente. Como novedad, cabe apuntar la utilización de nuevos métodos de estimación por intervalos. Al intervalo clásico basado en el método de la raíz cuadrada del error cuadrático medio, se añaden los intervalos basados en la desviación típica y aquellos intervalos estimados con el método bootstrap de sesgo corregido y acelerado (BCA por sus siglas en inglés).       

Keywords: forecasts, accuracy, U Theil’s statistic, forecast intervals

JEL classification: C12, C14, C18