岛上设置「火烧岛浮浪人收容所」。绿岛旧名为火烧岛，据说黄昏时分，从外海远眺这座岛屿时，有如火烧。当时日本人囚禁的所谓浮浪人，其实大多为黑道分子。选择此岛的原因是四面环海，犯人脱逃困难。1950年代，火烧岛浮浪人收容所转型为监狱，专门用作囚禁异见者和政治犯等，后来转型为重刑犯和帮派份子的收容所。目前绿岛中寮村“矫正署绿岛监狱”依旧持续收容全台各监狱最难以管教之罪犯。