En la década de 1960, durante su educación secundaria ("high school") exploró su sexualidad en clubes "underground" para adolescentes gays, mientras vivía con el miedo de que su «psicópata y derechista» padre le descubriera: en un momento dado, su padre llegó a contratar los servicios de un detective privado para seguirle, cuando especulaba que Baker mantenía una relación con uno de sus vecinos.