Det hade emellanåt ändå oroat honom,