A.- Mit Verfügung vom 20. Juli 2000 stellte die Arbeitslosenkasse des Kantons Zürich die 1968 geborene M._ für die Dauer von 36 Tagen wegen selbstverschuldeter Arbeitslosigkeit in der Anspruchsberechtigung ein. Zur Begründung wurde angegeben, sie sei während 16 Arbeitstagen unentschuldigt der Arbeit fern geblieben, weshalb M._ der Arbeitgeberin Anlass zur Kündigung gegeben habe. B.- Die dagegen erhobene Beschwerde hiess das Sozialversicherungsgericht des Kantons Zürich in dem Sinne gut, dass es die Sache an die Arbeitslosenkasse zurückwies, damit diese, nach erfolgter Abklärungen im Sinne der Erwägungen, neu verfüge (Entscheid vom 26. Juli 2001). C.- Das Staatssekretariat für Wirtschaft (seco) führt Verwaltungsgerichtsbeschwerde und beantragt, in Aufhebung des vorinstanzlichen Entscheids sei die Sache an das kantonale Gericht zurückzuweisen, damit dieses, eventuell nach Vornahme weiterer Sachverhaltsabklärungen, hierüber entscheide. M._ lässt Gutheissung der Verwaltungsgerichtsbeschwerde beantragen. Die als Mitinteressierte beigeladene Arbeitslosenkasse verzichtet auf eine Stellungnahme.