Das 13. Jahrhundert scheint den Niedergang des Bjarmalandes eingeleitet zu haben, denn es wurde Nowgorod tributpflichtig. Während viele Slawen vor der Mongolischen Invasion nordwärts, Richtung Belosersk und Bjarmaland, flohen, suchten die aus ihrem Land vertriebenen Bjarmen in Norwegen Zuflucht. Dort wurde ihnen im Jahre 1240 von Håkon IV. Land in "Malangen" zugewiesen. Bedeutsamer für deren Niedergang war wahrscheinlich, dass sich die Handelsrouten mit dem Einsetzen der Kreuzzüge mehr nach Westen verlagerten oder sich beträchtlich nach Süden verschoben. Als die Nowgoroder im beginnenden 13. Jahrhundert Weliki Ustjug gründeten, erwuchs den Bjarmen ein gewichtiger Handelskonkurrent. Mehr und mehr Pomoren gelangten im 14. und 15. Jahrhundert in die Region, was zur abschließenden Unterwerfung und Assimilation der Bjarmen durch die Slawen führte.