В 1918 году Кемп был членом . В 1919 году он был одним из комиссаров, представлявших Канаду на Парижской мирной конференции. В том же году пост министра заморских вооружённых сил был упразднён; к этому времени под руководством Кемпа была проведена эвакуация Канадского экспедиционного корпуса из Европы в Канаду и его демобилизация. После этого Кемп более не занимал министерских постов, но оставался членом Палаты общин до 1921 года.