亲王及查尔斯·詹姆士·福克斯等人为伍。然而，塔尔顿在英国没有工作，仅仅继续从他的中校身份向军队支取半薪，加上他热衷赌博及沉迷享乐，没多久就陷入财政困难。1782年初，内政大臣谢尔本勋爵有意任命康沃利斯勋爵为印度总督，康沃利斯随即打算安排塔尔顿一同前往印度，并让他打理骑兵队。不过由于康沃利斯刚刚透过人质交换协议的形式从北美返英，而有关保释又未失效，结果康沃利斯的任命始终也没有实现。 未几，塔尔顿获康沃利斯安排下前往法国南部避债，并在当地住上好一段日子，而他的债务最后由家人所分担。返回英国后，塔尔顿继续追随