Bismarck ble i 1995 medlem av CDU og var viseformann for CDU-laget i kretsen hertugdømmet Lauenburg. Han var fra 25. april 2005 medlem av det tyske parlamentet, Forbundsdagen, etter at han rykket opp da Peter Harry Carstensen nedla sitt mandat for å bli statsminister i Schleswig-Holstein.