Plán na založení alternativního kulturního centra v Československu vznikl již v sedmdesátých letech 20. století. Kvůli komunistickému procesu s Chartou 77 však byl tento plán odložen až do roku 1989, kdy se pronásledování disidenti, především Miroslav Skalický, František Stárek, Jiří Kostúr nebo Ivan Martin Jirous, mohli beztrestně projevovat. Skalickému se poté podařilo získat právě prostory bývalého Brázdova mlýna bez vodního motoru, které nechal přebudovat na tvrz.