En 1856, Despard se mudó a las islas Malvinas, a hacerse cargo de la misión anglicana establecida en la isla Keppel o Vigía, llevando consigo a su esposa, sus hijos y su hijo adoptivo Thomas Bridges.