Hacia 1966 Milanés fue enviado por las autoridades a un campo de trabajo forzoso de la Unidad Militar de Ayuda a la Producción (UMAP) en la zona de Camagüey en el centro de la isla.