La etimología de Valdeolmillos proviene del sustantivo latino "Vallis-is" más "ulmus", ‘olmo’, con el diminutivo ‘-illos’ por lo que vendría a significar «el lugar de los pequeños olmos».