Amat abrigaba el propósito de no regresar a España cuando fuera relevado en el gobierno, y tan decidido estaba a dejar sus huesos en Lima, que hizo construir, en la vecindad del monasterio del Prado, una magnífica casa, con el nombre de Quinta del Rincón.