妻木赖功的次子。因为父亲赖功在1862年前往长崎表立合御用赴任，在当地过世的原因，3歳时妻木赖黄便成为第12代当家。明治9年（1876年）卖掉家产渡海至美国，被告诫要回日本求学而归国。在1878年，进入工部大学校造家学科（今天的东大建筑学系）就读，跟随康德学习，是辰野金吾的后辈。1882年，被退学，前往美国留学，取得康乃尔大学的学士学位，1885年归国。回国后在东京府工作，1886年，在因议院（国会议事堂）建设工作所组织的（内阁）临时建筑局里工作。作为官厅集中计画的一环，为了研究议院建筑，和渡边让、河