香港保卫战爆发，日本军队战机已经迅速轰炸空军基地，使到香港失去制空能力。香港日治时期，该址曾被日军改作宪兵部。1945年香港重光后，该址恢复作为皇家空军基地，直到1978年迁往石岗机场为止。搬迁后部分土地用作兴建启业邨，1981年完工。其时由于香港越南船民问题，该址在皇家空军搬离后旋即改为一个难民营以收容越南船民，当时称为启德难民营（又称新秀难民营），由监狱署（1982年改组成惩教署）管理。1989年港府实施甄别政策，难民营改称为启德越南船民离港中心，并转由民众安全服务队管理，及后又改名启德越南船民转介