自愿留在香港的居民被押到上环海旁妓院一带（现港澳码头附近）囚禁。妓院环境肮脏挤迫，而且居民在此得不到粮食。17天后，被拘留者乘船前往赤柱。然而到一月底，大多数被拘留的平民被送到赤柱囚禁。
拘留营环境.日本人与前港府医务总监司徒永觉博士和辅政司詹逊协商后，选出拘留营的位址。拘留营位于赤柱半岛，距离市区约九公里。拘留营范围包括圣士提反书院和赤柱监狱一带（但不包括监狱本身）；事实上，日本当局曾关押他们认定的「罪犯」于此监狱。圣士提反书院校舍内除了教室以外，还有礼堂、教师宿舍和科学实验