Men de møtte også motgang. Flere av innbyggere var skeptiske. De var motstandere av at «en fanatisk religion som var svermerisk i formen» etablerte seg på stedet. Under ett møte var en større gjeng samlet utenfor møtelokalet. Stemningen ble spent og tilslutt måtte Aasebø rømme ut bakveien.