"Pretty Hate Machine" dejó de editarse por TVT Records, pero fue relanzado por Rykodisc Records el 22 de noviembre de 2005, con cambios menores en el packaging.