Дом с 12 спальнями был построен в 1928 году . Сардар Патель и Махатма Ганди были частыми гостями семьи Бирла. В последний раз Махатма Ганди гостил здесь с 9 сентября 1947 года по 30 января 1948 года, когда он был убит. Джавахарлал Неру написал Гханшьямдасу Бирле, добиваясь превращения части Дома Бирла в мемориал. Тот довольно неохотно отнесся к тому, чтобы отдать дом с которым у него было связано множество воспоминаний. Дом Бирла был выкуплен у Кришны Кумара Бирла правительством Индии в 1971 году, после длительных и тяжелых переговоров, в которых, по некоторым данным, он даже внес в цену продажи стоимость фруктовых деревьев. Итоговая цена дома составила 5,4 миллиона рупий (Rs 54 лакхов) наличными и семь акров городской земли в обмен, что было очень выгодной сделкой. Дом Бирла открылся для посетителей 15 августа 1973 года, будучи переименован в Ганди Смрити (или Дом Памяти Ганди).