Schlussabrechnung über das Sicherheitskonto, hat sich ergeben: A.- Die aus Bosnien-Herzegowina stammenden Eheleute M. und S. A._ (geb. 1960 bzw. 1962) hielten sich seit 1987 verschiedentlich in der Schweiz als Saisonniers auf. Laut Bundesamt für Flüchtlinge reisten sie mit ihren Kindern (B._, geb. 1983, C._ und D._, geb. 1988) 1991 erneut in die Schweiz ein und erhielten im Rahmen der "Aktion Jugoslawien" bis März 1992 gültige Aufenthaltsbewilligungen. Mit am 6. April 1992 beim Bundesamt für Flüchtlinge eingegangenem Schreiben ersuchten sie um Asyl. Das Bundesamt für Flüchtlinge wies sie mit Entscheid vom 27. April 1992 dem Kanton Graubünden zu. Als die Eheleute A._ tags darauf bei den Graubündner Behörden vorsprachen, wurden sie zunächst dem Erstaufnahmezentrum FlimsWaldhaus zugeteilt. Am 4. Mai 1992 traten sie ins Durchgangszentrum X._ ein. Am 4. Februar 1993 lehnte das Bundesamt für Flüchtlinge das Asylgesuch der Familie A._ ab und verfügte ihre Wegweisung. Da es die Rückschaffung nach Bosnien-Herzegowina als nicht zumutbar erachtete, ordnete es gleichzeitig deren vorläufige Aufnahme an. Mit Entscheid vom 2. Juni 1997 hob es die vorläufige Aufnahme auf. Nachdem hiegegen gerichtete Rechtsmittel erfolglos geblieben waren, verliess die Familie am 11. bzw. 15. Juli 1999 die Schweiz. B.- Bis zur Ausreise waren vom schweizerischen Erwerbseinkommen der Eheleute A._ Überweisungen auf zwei vom Bund eingerichtete Sicherheitskonten getätigt worden. Die Eheleute beantragten die Auszahlung der auf den Konten befindlichen Guthaben. Darauf stellte ihnen das Bundesamt für Flüchtlinge sukzessiv verschiedene Entwürfe von Abrechnungen für während der Zeitspanne des Asylverfahrens und der vorläufigen Aufnahme angeblich entstandene und rückerstattungspflichtige Fürsorgekosten zu, die jedes Mal zu anderen Ergebnissen führten. Die Eheleute A._ bestritten jeweils, dass solche Kosten überhaupt entstanden seien. Schliesslich verfügte das Bundesamt für Flüchtlinge in seiner Schlussabrechnung vom 8. August 2000 Folgendes: "1. Die Sicherheitskonti Nr. 1........ und Nr. 2........ weisen mit Datum vom 8.8.2000 einen Saldo von insgesamt Fr. 25'092. 45 auf. 2. Die aus der Sicherheitsleistungspflicht zurückzuerstattenden Kosten werden auf Fr. 26'400.-- festgesetzt. 3. Die Sicherheitskonti Nr. 1........ und Nr. 2........ werden saldiert. Der Saldo gemäss Ziff. 1, zuzüglich Zins, abzüglich Spesen, wird dem Bundesamt für Flüchtlinge als anteilsmässige Rückerstattung an die verursachten Kosten überwiesen.. " Hierbei ging das Bundesamt für Flüchtlinge davon aus, die Eheleute A._ seien während des Asylverfahrens vom 28. April bis zum 15. Dezember 1992 (231 Tage) und während der vorläufigen Aufnahme vom 31. März bis zum 5. Juli 1993 (96 Tage) ohne Erwerbseinkommen und damit fürsorgebedürftig gewesen. Die in dieser Zeit entstandenen Fürsorgekosten setzte es sodann bezogen auf das Asylverfahren auf pauschal Fr. 7'200.-- (= Fr. 3'600.-- pro erwachsene Person) fest; betreffend die vorläufige Aufnahme berechnete es für 96 Tage eine Tagespauschale von Fr. 40.-- pro Person (Fr. 40.-- x 5 Personen x 96 Tage = Fr. 19'200.--). C.- Gegen die Schlussabrechnung gelangten die Eheleute A._ an das Eidgenössische Justiz- und Polizeidepartement, welches ihre Beschwerde am 25. April 2001 abwies. D.- M. und S. A._ haben am 22. Mai 2001 beim Bundesgericht Verwaltungsgerichtsbeschwerde eingereicht mit dem Antrag, den Entscheid des Eidgenössischen Justiz- und Polizeidepartements vom 25. April 2001 aufzuheben. Zudem ersuchen sie um unentgeltliche Rechtspflege. Das Eidgenössische Justiz- und Polizeidepartement schliesst auf Abweisung der Beschwerde.