Aunque sin reconocer la paternidad, el religioso llevó al niño a su hacienda en la Lagoa de Cima, donde Patrocínio pasó la infancia como libre, conviviendo, sin embargo, con los esclavos y con los rígidos castigos que les eran impuestos.