Han lämnade snabbt huset tillsammans med sin familj .