Otra teoría, propuesta en su momento por el padre José de Sigüenza, deriva el término Escorial del latín "scoria", que significa inmundicia o desecho, referido especialmente a aquellos resultantes del trabajo de los metales; significaría, por tanto, un lugar donde se abandonaban esos desechos o un montón de escorias.