Create app dir if necessary