Remove m4 directory