Гримм в 1976 году подписал письмо в защиту Сергея Ковалёва, был соредактором самиздатского сборника 1977 года «Вокруг проекта Конституции», в 1978 году присоединился к обращению, посвященному десятилетию советского вторжения в Чехословакию. В 1978 году Гримм стал одним из соредакторов самиздатского журнала "Поиски". В связи с этим он подвергался обыскам, допросам, задержанию, административному аресту, фактическому домашнему аресту.