就已经新增近2,500名来港船民，令全港羁留设施均告饱和，布政司署保安科有见及此，在5月8日向行政立法两局建议将深水埗难民营的船民迁到四季大厦并改作开放式船民营，而深水埗难民营就会被改建为羁留中心。消息传出后，随即受到立法局议员的质疑，谭耀宗、张鑑泉、司徒华、范徐丽泰和梁炜彤都表示不赞成这个计划，认为政府决定太仓促，而且四季大厦这个新选址太近民居，担心造成治安问题。而时任荃湾区议会主席周厚澄则明言极力反对此安排，并相信全个荃湾区的居民也不会接受。另外有三个地方团体和部分荃湾区议员都一致发表声明反对在四季大厦