ઇન્દિરા ગાંધીની નારાજગીના કારણે ૧૯૭૨માં સ્વામીને આઇઆઇટી દિલ્હીની નોકરી ગુમાવવી પડી હતી, પરંતુ સ્વામી ૧૯૯૧માં કેસ જીતી ગયાં હતાં.