De som mest differerat från Lincolns politik,