Hans mor hadde drevet i Carl Johans gate i Christiania. I 1936, lenge etter at gamle fru Bye var død og hotellet avhendet, tok Erik Ole i bruk inventaret fra hotellet og etablerte på Nordstrand, i Vingolfveien 12. Huset ble senere et sameie av private boliger. Erik Ole Bye var far til Erik Bye.