Jadwiga Piłsudska war die zweite Tochter von Józef Piłsudski und seiner Ehefrau Aleksandra (1882–1963). Die kleine Jagoda, wie sie von ihrer Familie zärtlich genannt wurde, lebte zusammen mit ihren Eltern und der älteren Schwester Wanda (1918–2001) bis 1922, solange ihr Vater Staatschef () Polens war, im Warschauer Belvedere-Palast. Danach, von 1923 bis 1926, war ihr Heim die Villa Milusin in Sulejówek, einer Kleinstadt knapp zwanzig Kilometer östlich von Warschau. Nach dem Maiputsch von 1926 kehrte die Familie Piłsudski in den Belvedere-Palast zurück und lebte dort bis zum Tod des Vaters im Jahr 1935.