Hun var født i Trondhjem, flyttet til Risør da hennes far, Peter Gustav Zwilgmeyer ble beordret dit som byfogd, i mai 1861. Farfaren Heinrich Carl Zwilgmeyer var tyskfødt. Moren var Margrete Giørwel Daae. Navnet Barbara Hendrikke Wind Daae hadde hun etter mormoren Barbara Henrikke Wind på Solnør i Skodje i Borgund. Suzannah Ibsen var kusine av moren Margrete. Morens barndomshjem var velstående, kultivert og kjent for sin store boksamling. Ivar Aasen var huslærer for moren og hennes søsken, og Aasen var hyppig gjest hos familien etter at familien Zwilgmeyer flyttet til Kristiania. Arkeologen Ingvald Undset var en husvenn hos familien. Dikken Zwilgmeyer benyttet i liten grad familiens forbindelser til det litterære miljøet i byen.