Sachverhalt: A. E._ ist seit 1. Januar 1990 als selbstständig erwerbender Architekt der Ausgleichskasse des Kantons St. Gallen (nachfolgend: Ausgleichskasse) angeschlossen. Gestützt auf die Steuermeldung vom 18. August 2004 setzte die Ausgleichskasse mit Verfügung vom 23. November 2004, bestätigt mit Einspracheentscheid vom 30. März 2005, seine Beiträge für das Jahr 2002 bei einem investierten Eigenkapital von Fr. 44'998.- und einem Erwerbseinkommen von Fr. 2'309'251.- fest. Das gemeldete Einkommen enthält auch einen Forderungsverzicht der Bank X._ in der Höhe von Fr. 2'109'665.50 (vgl. Vereinbarung vom 30. Januar 2002). B. Die hiegegen erhobene Beschwerde wies das Versicherungsgericht des Kantons St. Gallen mit Entscheid vom 1. September 2005 ab. C. E._ lässt Verwaltungsgerichtsbeschwerde führen mit dem Antrag, es seien der vorinstanzliche Entscheid aufzuheben und seine Beiträge für das Jahr 2002 auf einem Einkommen von Fr. 198'334.50 festzusetzen. Die Ausgleichskasse schliesst auf Abweisung der Verwaltungsgerichtsbeschwerde. Das Bundesamt für Sozialversicherungen (nachfolgend: BSV) verzichtet auf eine Vernehmlassung. D. Am 21. November 2006 fand eine parteiöffentliche Beratung statt. Das BSV reichte am 30. November 2006 eine Stellungnahme ein, welche den Parteien zugestellt wurde. Die Ausgleichskasse verzichtet auf eine Eingabe. E._ liess sich am 7. Dezember 2006 vernehmen.