En octobre 1968, Fischer refusa de participer à l'olympiade de Lugano car les conditions de jeu (bruit et éclairage) ne lui convenaient pas. La même année, il quitta New York et déménagea à Los Angeles.