杨绛5岁开始发蒙，在北京女子高等师范学校附属小学读书，他的三姑母杨荫榆当时就在那工作。杨绛在学校扎着牛角辫子，经常和高年级学生荡秋千。当时，杨荫杭先后出任京师高等审判厅厅长、京师高等审判厅检察长、司法部参事等职务。张勋复辟时，全家没有来得及逃离北京，就在一位英国朋友家躲避了数日。1916年5月，交通部总长许世英因受贿被捕，检察长杨荫杭不准他保释，但是国务会议认为许世英没有犯罪证据而宣告无罪，并且追究杨荫杭的责任。1919年，杨荫杭辞职南归，没等照准就带着家人回老家无锡，当时杨绛读小学三年级。