Bankiren Cornelius Herz har vägrat att möta inför Panama- kommissionen.