传说韦驮菩萨很凶猛,好惹事生非,凡看不顺眼的人都要打死。这位“菩萨”的举目违背了佛教慈悲为怀的宗旨。佛祖说,以后我到哪里,你都要面对着我站着。因此,韦驮像总是面对佛站立,其形象一般是全身戴盔披甲,手持金刚笔,一副唐朝武将戎装打扮,童子面相,表明他勇猛善战,并有赤子之心。)
韦驮手里的金刚杵放的位置不一样,意思也不一样,第一种是:如果金刚杵柱地,说明这里是四方寺院,外来憎人只留吃不留住,第二种是:如果金刚杵放平,代表这里是十方寺院,又留吃又留住。外来憎人可以再次留宿,但因为少林寺是皇家寺院,韦驮金刚杵驻地,因此少林寺是不留宿八方憎人的。