Før det ble avklart at litteraturhuset skulle flytte inn i den tidligere Hovedbrannstasjonen, vurderte styringsgruppen flere andre alternativer. I mai 2012 publiserte de prosjektbeskrivelsen . Her konkluderte gruppen med at Huitfeldtgården i Kjøpmannsgaten 14 var det beste alternativet, noe forfatterne i byen var enige i, og i februar 2012 bevilget Fritt Ord to millioner kroner i etableringsstøtte for oppstart der. Det ble opplyst i prosjektbeskrivelsen at gårdeieren var villig til å pusse opp og rehabilitere gården i tråd med Litteraturhusets behov og ønsker. Den årlige driften var beregnet til fem millioner kroner i året, med egne arrangementer og utleie, og en stab på minimum tre årsverk.