Byggingen startet i 1469, da Piers Warburton flyttet sitt hovedsete fra Warburton til Arley. Den første bygnignen var U-formet, med åpningen av U'en mot sør. På nordsiden lå den store hallen, som var 13,7 x 8 meter. Familiens rom var i vestfløyen, mens tjenerskapets rom, kjøkken og spiskammer var i østfløyen.