James married his first wife, Juanita Young, in Trinidad in 1929, but his move three years later to Britain led to their estrangement.
Ο Τζέιμς παντρεύτηκε την πρώτη σύζυγό του, Χουανίτα Γιάνγκ, στο Τρινιντάντ το 1929, αλλά η μετακόμισή του στη Βρετανία τρία χρόνια αργότερα οδήγησε στην αποξένωσή τους.