Lordernes parti står allt sämre.