Дела театра шли плохо, антрепренёры менялись, аренда платилась неисправно, и сын Петра Бугрова — Александр потребовал выселения театра. В 1862 году здание купил губернский предводитель дворян А. А. Турчанинов, но после его смерти в 1863 году в здании снова разместился театр. В 1894 году в преддверии Всероссийской промышленно-художественной выставки городская Дума собиралась отремонтировать здание театра, пострадавшее от нескольких пожаров. Но гласный Городской думы Николай Александрович Бугров, не желавший видеть театр в доме, построенном его дедом, предложил 200 тысяч рублей для постройки театра на Большой Покровской. Новый театр был построен, а старое здание было выкуплено Николаем Бугровым за 50 тысяч рублей и передано в дар Городской думе в знак благодарности нижегородского купечества городскому самоуправлению за развитие и благоустройство Нижнего, но с двумя условиями: во-первых, «чтобы в этом здании никогда больше не допускалось бы устройство какого-либо театра, а равно и торгового заведения по продаже спиртных напитков», во-вторых, «чтобы доходы от дома поступали в особый фонд для раздачи городской бедноте по усмотрению Городской управы». Дума намеревалась сдать первый этаж под магазины, а на втором этаже разместить городскую библиотеку, но в 1898 году во время ремонта от небрежного обращения с электричеством возник пожар, полностью уничтоживший здание.