Bridges giftet seg med Dorothy Louise Simpson i New York 1938. Sammen fikk de fire barn, deriblant skuespillerne Jeff og Beau Bridges. Sønnen Garrett Myles Bridges døde av krybbedød i 1948. Han var farfar til skuespilleren Jordan Bridges.