Das Eidg. Versicherungsgericht zieht in Erwägung:
1.- Das kantonale Gericht hat nach korrekter Wiedergabe der im vorliegenden Fall massgebenden gesetzlichen Bestimmungen über die Anspruchsgrundlage der Vermittlungsfähigkeit von teilweise Arbeitslosen (<ref-law> in Verbindung mit Art. 15 Abs. 1 und Art. 10 Abs. 2 AVIG) sowie der dazu ergangenen Rechtsprechung, wonach ein Arbeitsausfall von mindestens 20 % einer Vollerwerbstätigkeit vorliegen muss (<ref-ruling> Erw. 4c/aa mit Hinweisen), und nach pflichtgemässer Beweiswürdigung zutreffend erkannt, dass die Versicherte aufgrund der Aktenlage, insbesondere der Zeugenaussage von B._, Rektor der Musikabteilung der Schule X._ (vom 20. November 2001), mit überwiegender Wahrscheinlichkeit ein zusätzliches Pensum von 6 Wochenstunden Musikunterricht erteilen wollte und der Arbeitsausfall bei einer unbestrittenen Vollerwerbstätigkeit von 24 Wochenlektionen mithin 25 % beträgt. Zu Recht hat es somit die Vermittlungsfähigkeit der Versicherten unter dem Gesichtspunkt des minimalen Arbeitsausfalles bejaht. Auf die ausführlichen Erwägungen der Vorinstanz, denen das Eidgenössische Versicherungsgericht nichts beizufügen hat, kann verwiesen werden. Die letztinstanzlich vorgebrachten Einwände vermögen zu keinem andern Ergebnis zu führen. Namentlich besteht kein Anlass, an der Zeugenaussage von B._ vom 20. November 2001 zu zweifeln.
2.- Da die Verwaltungsgerichtsbeschwerde offensichtlich unbegründet ist, wird sie im Verfahren nach Art. 36a OG erledigt.

Demnach erkennt das Eidg. Versicherungsgericht:
I.Die Verwaltungsgerichtsbeschwerde wird abgewiesen.
II.Es werden keine Gerichtskosten erhoben.
III. Das Amt für Wirtschaft und Arbeit des Kantons Solothurn hat der Beschwerdegegnerin für das Verfahren vor dem Eidgenössischen Versicherungsgericht eine Parteientschädigung
von Fr. 2500.- (einschliesslich Mehrwertsteuer)
zu bezahlen.
IV.Dieses Urteil wird den Parteien, dem Versicherungsgericht des Kantons Solothurn, der Öffentlichen Arbeitslosenkasse des Kantons Solothurn und dem
Staatssekretariat für Wirtschaft zugestellt.
Luzern, 27. Mai 2002
Im Namen des
Eidgenössischen Versicherungsgerichts
Der Präsident der II. Kammer:
Die Gerichtsschreiberin: