When his parents divorced in 1978, Downey moved to California with his father, but in 1982, he dropped out of Santa Monica High School, and moved back to New York to pursue an acting career full-time.
Ketika orang tuanya bercerai pada tahun 1978, Downey pindah ke California dengan ayahnya, namun pada tahun 1982 ia drop out dari Santa Monica High School dan pindah kembali ke New York untuk mengejar karier akting penuh waktu.