Sachverhalt: Sachverhalt: A. Im Ethnologisch-Psychologischen Zentrum der Stadt Zürich (nachfolgend: EPZ oder Zentrum) werden in drei verschiedenen Häusern bis zu 100 Asylsuchende untergebracht und stationär betreut. Diese Personen können sich aufgrund ihrer schwerwiegenden psychischen und/ oder sozialen Schwierigkeiten und Störungen (beispielsweise Psychosen, Schizophrenien, Depressionen, posttraumatischen Störungen oder psychisch bedingter Invalidität) nicht in den regulären Unterbringungs- und Betreuungsstrukturen aufhalten. Die Stadt Zürich führt diese vor allem für traumatisierte Personen gedachte Einrichtung im Auftrag des Kantons Zürich. Der Kanton Zürich, vertreten durch die Direktion für Soziales und Sicherheit des Kantons Zürich, ersuchte das Bundesamt für Flüchtlinge (seit 1. Januar 2005 Bundesamt für Migration, nachfolgend: Bundesamt) am 23. August 2001, rückwirkend ab dem 1. Januar 2001 Pauschalen auszurichten für spezielle Unterbringungsformen im Sinn von Art. 25 der Asylverordnung 2 über Finanzierungsfragen vom 11. August 1999 (AsylV 2; SR 142.312) für die stationäre Unterbringung und Betreuung von Personen des Asylrechts mit schwerwiegenden Schwierigkeiten oder Störungen. Das Bundesamt lehnte dies in einer Stellungnahme vom 30. November 2001 ab, weil das EPZ ein privates und nicht ein als Leistungserbringer nach den sozialversicherungsrechtlichen Bestimmungen anerkanntes Heim sei. Mit ausführlicher Begründung erneuerte der Kanton Zürich am 8. April 2002 sein Gesuch um Beitragspauschalen nach Art. 25 AsylV 2, erweitert um eine eventuelle Gutsprache eines jährlichen Beitrags von Fr. 1'118'000.-- an das EPZ nach Art. 44 AsylV 2. Das Bundesamt für Flüchtlinge gab beim Bundesamt für Justiz ein Gutachten in Auftrag, das am 5. Juli 2002 zum Schluss kam, aufgrund von Art. 25 Abs. 1 AsylV 2 bestehe kein Anspruch auf Pauschalbeiträge des Bundes für Personen, die in einer besonderen Institution untergebracht werden müssen, solange diese nicht als Leistungserbringer im Sinne des Kranken- oder Invalidenversicherungsrechts anerkannt sei; die Ausrichtung von Beiträgen nach Art. 44 AsylV 2 sei an die Voraussetzung gebunden, dass Personen behandelt werden, die unter den Geltungsbereich des Asylgesetzes fallen, dass die Forschungs- und Lehrtätigkeit gefördert werde und die Leistungserbringer nach den Bestimmungen des Krankenversicherungsrechts zugelassen seien. In Kenntnis dieses Gutachtens verlangte der Kanton Zürich am 23. Oktober 2002 vom Bundesamt für Flüchtlinge den Erlass einer anfechtbaren Verfügung über den Antrag, gestützt auf Art. 25 AsylV 2, eventuell gestützt auf Art. 44 AsylV 2 rückwirkend ab 1. Januar 2001 eine Pauschale zuzusprechen. In Kenntnis dieses Gutachtens verlangte der Kanton Zürich am 23. Oktober 2002 vom Bundesamt für Flüchtlinge den Erlass einer anfechtbaren Verfügung über den Antrag, gestützt auf Art. 25 AsylV 2, eventuell gestützt auf Art. 44 AsylV 2 rückwirkend ab 1. Januar 2001 eine Pauschale zuzusprechen. B. Das Bundesamt wies das Gesuch am 13. November 2002 ab. Nach dem klaren und eindeutigen Wortlaut von Art. 25 Abs. 1 AsylV 2 sei ein Institut nur anspruchsberechtigt für die Ausrichtung einer Pauschale für Sonderunterbringung, wenn es formell als Leistungserbringer des Kranken- oder Invalidenversicherungsrechts anerkannt sei. Vorliegend fehle es aber an einer solchen Anerkennung, ebenso wie an einer Zulassung nach den Bestimmungen des Bundesgesetzes vom 18. März 1994 über die Krankenversicherung (KVG; SR 832.10) gemäss Art. 44 AsylV 2. Falls sich aus der ausnahmsweisen Unterbringung von Personen nach Abs. 2 von Art. 25 AsylV 2 (betagte Flüchtlinge; von der Vormundschaftsbehörde eingewiesene Erwachsene) Kosten ergeben sollten, wären diese dem Bund im Einzelfall in Rechnung zu stellen. Das Bundesamt lehnte auch die rückwirkende Abgeltung ab: Für Sozialhilfeleistungen gelte der Grundsatz der Bedarfsdeckung, die in einer gegenwärtigen Notlage Abhilfe schaffen solle. Darum könnten in der Vergangenheit erbrachte Leistungen nicht unter diesem Titel abgegolten werden. B. Das Bundesamt wies das Gesuch am 13. November 2002 ab. Nach dem klaren und eindeutigen Wortlaut von Art. 25 Abs. 1 AsylV 2 sei ein Institut nur anspruchsberechtigt für die Ausrichtung einer Pauschale für Sonderunterbringung, wenn es formell als Leistungserbringer des Kranken- oder Invalidenversicherungsrechts anerkannt sei. Vorliegend fehle es aber an einer solchen Anerkennung, ebenso wie an einer Zulassung nach den Bestimmungen des Bundesgesetzes vom 18. März 1994 über die Krankenversicherung (KVG; SR 832.10) gemäss Art. 44 AsylV 2. Falls sich aus der ausnahmsweisen Unterbringung von Personen nach Abs. 2 von Art. 25 AsylV 2 (betagte Flüchtlinge; von der Vormundschaftsbehörde eingewiesene Erwachsene) Kosten ergeben sollten, wären diese dem Bund im Einzelfall in Rechnung zu stellen. Das Bundesamt lehnte auch die rückwirkende Abgeltung ab: Für Sozialhilfeleistungen gelte der Grundsatz der Bedarfsdeckung, die in einer gegenwärtigen Notlage Abhilfe schaffen solle. Darum könnten in der Vergangenheit erbrachte Leistungen nicht unter diesem Titel abgegolten werden. C. Dagegen erhob der Kanton Zürich am 16. Dezember 2002 Beschwerde beim Eidgenössischen Justiz- und Polizeidepartement (nachfolgend auch Departement) und verlangte wiederum die rückwirkende Zusprechung von Beiträgen gestützt auf Art. 25 AsylV 2, eventuell gestützt auf Art. 44 AsylV 2. Das Departement wies die Beschwerde am 31. März 2004 ab. Für Beiträge nach Art. 25 AsylV 2 genüge es nicht, dass unter das Asylgesetz fallende Personen in einer für die betreffenden Behandlungen geeigneten respektive spezialisierten Institution untergebracht würden. Die Institution müsse auch formell als Leistungserbringer nach den Bestimmungen des Kranken- oder Invalidenversicherungsrechts anerkannt sein. Das EPZ aber verfüge über keine formelle Anerkennung und figuriere weder auf der IV- noch der Psychiatrie- oder Spitalliste des Kantons Zürich. Es bestehe lediglich eine Bewilligung für den Betrieb eines privaten Heims gemäss § 9 lit. c des Zürcher Gesetzes vom 14. Juni 1981 über die öffentliche Sozialhilfe (Sozialhilfegesetz) und § 9 der dazugehörigen Verordnung vom 21. Oktober 1981. Die Ausrichtung eines Bundesbeitrags nach Art. 44 AsylV 2 liege im Ermessen des Bundesamtes, ein Anspruch bestehe nicht. Zudem fehle es dem EPZ an den entsprechenden Voraussetzungen (keine Lehr- und Forschungstätigkeit, keine Anerkennung als Leistungserbringer gemäss Krankenversicherungsgesetz). Die Frage der rückwirkenden Bezahlung der Beiträge wurde offen gelassen. Das Departement wies die Beschwerde am 31. März 2004 ab. Für Beiträge nach Art. 25 AsylV 2 genüge es nicht, dass unter das Asylgesetz fallende Personen in einer für die betreffenden Behandlungen geeigneten respektive spezialisierten Institution untergebracht würden. Die Institution müsse auch formell als Leistungserbringer nach den Bestimmungen des Kranken- oder Invalidenversicherungsrechts anerkannt sein. Das EPZ aber verfüge über keine formelle Anerkennung und figuriere weder auf der IV- noch der Psychiatrie- oder Spitalliste des Kantons Zürich. Es bestehe lediglich eine Bewilligung für den Betrieb eines privaten Heims gemäss § 9 lit. c des Zürcher Gesetzes vom 14. Juni 1981 über die öffentliche Sozialhilfe (Sozialhilfegesetz) und § 9 der dazugehörigen Verordnung vom 21. Oktober 1981. Die Ausrichtung eines Bundesbeitrags nach Art. 44 AsylV 2 liege im Ermessen des Bundesamtes, ein Anspruch bestehe nicht. Zudem fehle es dem EPZ an den entsprechenden Voraussetzungen (keine Lehr- und Forschungstätigkeit, keine Anerkennung als Leistungserbringer gemäss Krankenversicherungsgesetz). Die Frage der rückwirkenden Bezahlung der Beiträge wurde offen gelassen. D. Mit Verwaltungsgerichtsbeschwerde vom 3. Mai 2004 beantragt der Kanton Zürich dem Bundesgericht, den Beschwerdeentscheid des Departements vom 31. März 2004 und die Verfügung des Bundesamtes vom 13. November 2002 aufzuheben, ihm einen Pauschalbeitrag gestützt auf Art. 25 AsylV 2, eventuell gestützt auf Art. 44 AsylV 2 zuzusprechen und die Sache zur frankenmässigen Festsetzung der Beiträge an das Bundesamt zurückzuweisen. Das Eidgenössische Justiz- und Polizeidepartement beantragt die Abweisung der Verwaltungsgerichtsbeschwerde, soweit darauf eingetreten werden könne.