しかし、第一次世界大戦後の不況、昭和6年(1931年)の白根町火災、更には第二次世界大戦などにより生産は打撃を受け、戦後は着物の需要が減った事などにより衰退した。