Во время пожара 1812 года здания сильно пострадали, поэтому семья Луниных была вынуждена масштабно реконструировать помещения. Перестройка усадьбы началась в 1814 году под руководством архитектора Доменико Жилярди, известного своими проектами по возведению зданий в стиле московский ампир. В течение последующих четырёх лет главный корпусы был объёмно расширен, новый фасад выходил на Никитский бульвар, справа возвели двухэтажный флигель с шестиколонным портиком, а слева — одноэтажный служебный корпус. На высоте цоколя двухэтажный флигель украшал ионический портик, а между колоннами был помещён барельеф на тему победы в Отечественной войне 1812 года. На фасаде также располагались тридцать два изображения из древнегреческой мифологии, в том числе и лира. Украшения дома были посвящены дочери Петра Лунина — оперной певице Екатерине Риччи.