Så kom det en svår tid för Högemofolket.