Sachverhalt: Sachverhalt: A. A.a Der pakistanische Staatsangehörige X._ reiste am 5. Januar 1995 in die Schweiz ein und ersuchte hier um Asyl. Mit Verfügung vom 27. Februar 1997 lehnte das Bundesamt für Flüchtlinge (BFF) das Asylgesuch ab und wies X._ weg. Am 4. März 1997 heiratete er in Luzern die Schweizer Bürgerin Y._ und verzichtete in der Folge auf die Anfechtung des negativen Asylentscheids. Am 6. September 2000 erhielt X._ durch erleichterte Einbürgerung nach Art. 27 BüG das Schweizer Bürgerrecht. In diesem Zusammenhang hatte er am 31. Juli 2000 eine Erklärung unterzeichnet, wonach er und seine Schweizer Ehefrau "in einer tatsächlichen, ungetrennten, stabilen ehelichen Gemeinschaft an derselben Adresse zusammenleben und dass weder Trennungs- noch Scheidungsabsichten bestehen". Er war auch darüber belehrt worden, dass die erleichterte Einbürgerung nicht möglich sei, wenn vor oder während des Einbürgerungsverfahrens einer der Ehegatten die Trennung oder Scheidung beantragt habe oder keine tatsächliche eheliche Gemeinschaft mehr bestehe. Am 14. Februar 2001 wurde X._ von seiner Schweizer Ehefrau geschieden und heiratete am 9. Mai 2001 die pakistanische Staatsangehörige Z._. A.b Am 13. März 2002 teilte das Bundesamt für Ausländerfragen (BFA; heute: IMES, Bundesamt für Zuwanderung, Integration und Auswanderung) X._ die Eröffnung eines Verfahrens um Nichtigerklärung der erleichterten Einbürgerung mit. Dazu wurde ausgeführt, seine Ehe mit der Schweizer Bürgerin sei am 14. Februar 2001 bzw. nur fünf Monate nach der erleichterten Einbürgerung geschieden worden. Knappe drei Monate nach der Scheidung habe er eine pakistanische Staatsangehörige geheiratet. In der Eingabe vom 13. bzw. 21. Mai 2002 führte der vormalige Parteivertreter von X._ aus, bis September 2000 sei die Ehe mit Y._ durchaus stabil gewesen. Nach Einsichtnahme in die Scheidungsakten des Amtsgerichts Luzern -Stadt ersuchte das BFA am 14. Juli 2002 das Amt für Gemeinden des Kantons Luzern, die Schweizer Ex-Ehefrau zu den Umständen der seinerzeitigen Eheschliessung und der Scheidung sowie zum Verlauf der Ehe zu befragen. Der neue Parteivertreter nahm am 4. April 2003 zum Befragungsprotokoll vom 11. September 2002 Stellung. Er rügte insbesondere eine Verletzung des rechtlichen Gehörs, weil X._ von der Anhörung seiner Ex-Ehefrau ausgeschlossen worden sei und keinerlei Möglichkeit gehabt habe, Ergänzungsfragen zu stellen. A.c Mit Verfügung vom 29. Oktober 2003 erklärte das IMES die erleichterte Einbürgerung von X._ vom 6. September 2000 für nichtig. Die dagegen erhobene Beschwerde wies das Eidgenössische Justiz- und Polizeidepartement (EJPD) am 4. August 2004 ab. A.c Mit Verfügung vom 29. Oktober 2003 erklärte das IMES die erleichterte Einbürgerung von X._ vom 6. September 2000 für nichtig. Die dagegen erhobene Beschwerde wies das Eidgenössische Justiz- und Polizeidepartement (EJPD) am 4. August 2004 ab. B. Mit Eingabe vom 14. September 2004 führt X._ Verwaltungsgerichtsbeschwerde und beantragt, der Entscheid des Eidgenössischen Justiz- und Polizeidepartements vom 4. August 2004 sei aufzuheben, und es sei festzustellen, dass die am 6. September 2000 erfolgte erleichterte Einbürgerung des Beschwerdeführers gemäss Art. 41 BüG nicht nichtig sei. Es wurde keine Vernehmlassung eingeholt.