Brown había sido un siervo de confianza del reciente fallecido consorte de Victoria, el Príncipe Alberto; el jefe de los servicios públicos de Victoria pensó que Brown podría ayudar a aliviar a la Reina del profundo dolor que ella sentía por la muerte del Príncipe Consorte en 1861.