Desde 2002 hasta 2009, Silverman mantuvo una relación con Jimmy Kimmel, director de "Jimmy Kimmel Live".