Na XIX. sjezdu KSSS v říjnu 1952 se jeho politický pád projevil ztrátou členství v novém politbyru (prezidiu ÚV). Po Stalinově smrti, když došlo k dělení moci mezi jeho pohrobky, byl Kosygin opominut úplně a přestal být i kandidátem předsednictva ÚV.