A lo largo de la década de 1860, Victoria comenzó a confiar cada vez más en un criado escocés, John Brown; se ha llegado a alegar que entre ellos hubo una relación romántica e incluso un matrimonio secreto, y algunos periódicos empezaron a llamarla «Mrs Brown».