港，只曾在1960年访港旅游，因此被市政局民选议员叶钖恩等人质疑他对香港缺乏认识，政府内部对其空降也有微言。虽然如此，他很快就融入香港的社交圈子，并掌握和了解香港各方面的事务。应对连串暴动是祁济时在辅政司任内最大的考验。在1966年，中国大陆爆发文化大革命，使位处中国边陲的香港也变得日益动盪不稳。就在他上任后不久，九龙地区在1966年4月因为天星小轮头等收费上调五仙至港币两毫半而发生暴动，期间港府一度宣佈实施宵禁。暴动过后，港府虽然发表报告承认香港警队的贪污问题是暴动成因之一，但叶钖恩仍批评祁济时不了解