James estaba diseñado alrededor de varios patios, incluidos el "Colour Court", el "Ambassador's Court" y el "Friary Court".