Pero la desgracia vino a quebrar la familia, pues en 1597 moría su madre y poco después su esposa y su única hija, Juana.