北韓原本亦有份參與呢屆奧運會，但係有部分北韓選手曾經參加1963年嘅新興力量運動會（當時，國際奧委會阿頭布倫達治認為，新興力量運動會係「政治幹預體育運動」嘅舉動）搞到國際體育組織處罰曾經參加呢項運動會嘅北韓選手，搞到一啲北韓選手攞唔到奧運資格，於是響1964年10月8號，北韓宣告全體運動員退出比賽以示抗議。