James tuvo dos hijos con Syville Morgan, una antigua cantante y compositora, una hija, Ty, y un hijo, Rick Jr.