Men motståndet var hårt och under tiden som medlemmarna byggde huset saboterades bygget , åtminstone en , kanske fler gånger .