是詹姆士·威尔逊很讨厌它，“宁愿在父亲的工厂担任最卑微的仆人”。后来他决定学习经济学。因此詹姆士·威尔逊在16岁，成为了帽子工厂的学徒。后来，他的父亲为了他和他的哥哥威廉买下了该公司。詹姆士·威尔逊19岁的时候，他们离开苏格兰，前往伦敦，他还获得2000英镑（以2005年的物价水准来计算约为130,000英镑）。
伦敦时期.威尔逊兄弟建立了一间生产工厂－威尔逊，欧文与威尔逊，后来于1831年解散。威尔逊继续在同一行努力，业务非常成功（1837年，他的净资产是25,000英镑，以20