Almkvist var gift med forfatteren Anna-Lisa Almqvist fra 1929. De ble skilt, og fra 1937 var han gift med kunstneren Gunborg Ramstad.