James Grieg var sønnesønn av James Grieg (1803–70) som var sønn til James Grieg (1773–1821) som var sønn til Alexander Grieg (1739–1803) som kom fra Skottland. Han var nevø av zoologen Herman Friele (1838–1921) som jobbet samme sted (Bergens museum). Han var også svoger til arkeologen Gabriel Gustafson. Hans hobby var stangfiske med flue. James Grieg donerte sitt skjelett til museet, der det befinner seg i dag (2011).