19世纪末，由于连年战乱，清王朝逐渐走向衰落，大量银钱外流。晚年的乔致庸一改以往不置家宅的传统，于同治初年（1862年）开始在家院附近购置地皮，大兴土木，修建了规模庞大的宅院，即着名的“乔家大院”，至今保存完好，是山西民居的代表。乔致庸曾先后娶过六个妻子，分别是马氏、高氏、杨氏、周氏、杨氏、杨氏，育有六个儿子，十一个孙子，其中三儿子乔景俨在乔致庸晚年时当家。乔致庸待人随和，讲究诚信为本、“以德经商”。乔致庸一生做出诸多善行。光绪三年（1877年）天遭大旱，乔致庸开粮仓赈济灾民。光绪三十二年，乔致庸去世，