С детских лет Такер увлекался спортом, он прекрасно играл в гольф и мог стать профессиональным бейсболистом, как и его отец, который был игроком в низших лигах. Одновременно у него проявлялась тяга к актёрской игре. Направляемый своей матерью, которая была певицей, он ещё подростком стал артистом развлекательного жанра в эстрадных шоу. В возрасте 14 лет он уже пел в вечерней программе на Всемирной выставке «Век прогресса» в Чикаго в 1933 году. Позднее вместе с семьёй он переехал в Арлингтон, Вирджиния.