Henry giftet seg med Mary, datter av Thomas Fiennes, Lord Dacre. Hun døde før 1530. Deres eldste sønn var Henry Norreys, 1. baron Norreys av Rycote. Andre barn var Edward, som døde som barn, og Mary som ble gift, først med Sir George Carew som døde i forliset av krigsskipet «Mary Rose» i 1545, og andre gang med Sir Arthur Champernowne.