title: Evaluating Real GDP Growth Forecasts in the Bank of Canada Monetary Policy Report
Creators: name: Binette, Andre
name: Tchebotarev, Dmitri
Publisher: name: Bank of Canada
Year: 2017

description: This paper examines the quality of projections of real GDP growth taken from the Bank of Canada Monetary Policy Report (MPR) since they were first published in 1997. Over the last decade, it has become common practice among the central banking community to discuss forecast performance publicly. The assessment we undertake is on annual forecasts as well as the average prediction over the policy horizon. We find that the MPR is more accurate than a naïve forecast model and marginally superior to a consensus of professional forecasters. The accuracy of the MPR annual predictions, measured by the root-mean-square prediction error (RMSPE), improves from 1.6 to 0.6 percentage points as more data become available. On a two-year average basis, the RMSPEs are about 1.0 percentage point for forecasts made in April and October. Our results also suggest that the bias present in MPR forecasts is often not statistically significant for both annual and two-year projections. Nonetheless, we found a tendency to overpredict growth at the beginning of the forecast cycle. Finally, at the beginning of the forecast cycle, the MPR correctly predicts the sign of the change in annual real GDP growth roughly 50 per cent of the time, improving to about 75 per cent at the end of the cycle. The sign of change is correctly predicted roughly 60 per cent of the time for the two-year average prediction.
description: La qualité des projections de la croissance du PIB réel depuis leur première parution dans le Rapport sur la politique monétaire de la Banque du Canada en 1997 est examinée dans cette étude. Au cours des dix dernières années, il est devenu de plus en plus courant pour les banques centrales de discuter publiquement de la performance de leurs projections. Notre évaluation porte sur les projections annuelles et sur le taux moyen des prévisions de croissance pour la période de deux ans qui forme l’horizon de la politique monétaire. Nous constatons que les projections du Rapport sont plus précises que celles d’un modèle naïf, et d’une qualité légèrement supérieure à celle des projections du consensus de prévisionnistes professionnels. La précision des prévisions annuelles du Rapport, qui est mesurée par la racine carrée de l’erreur quadratique moyenne (RCEQM), augmente, passant de 1,6 à 0,6 point de pourcentage, dès lors qu’une plus grande quantité de données est disponible. Pour les taux moyens des prévisions sur deux ans, la RCEQM est d’environ 1,0 point de pourcentage si l’on considère les projections faites en avril et en octobre. Nos résultats montrent que le biais présent dans les projections du Rapport n’est en général pas statistiquement significatif, tant pour les prévisions annuelles que pour les prévisions sur deux ans. Nous découvrons néanmoins une tendance à surestimer les taux de croissance au début du cycle de projection. Enfin, au début du cycle de projection, le Rapport prévoit correctement l’orientation de la croissance annuelle du PIB réel pratiquement 5 fois sur 10; en fin de cycle, cette proportion s’élève à 75 %. Quant au taux moyen des prévisions sur deux ans, le Rapport prévoit correctement l’orientation de la croissance environ 6 fois sur 10.