Sachverhalt: A. Die 1955 geborene P._ musste sich am 12. April 2004 einer linksseitigen brusterhaltenden Tumorektomie mit Entfernung axillärer Lymphknoten unterziehen. Im Juni 2008 ersuchte sie die Invalidenversicherung um Kostenvergütung für die selbst angeschaffte Brust-Teilprothese. Mit Verfügung vom 13. Februar 2009 lehnte die IV-Stelle des Kantons Graubünden das Hilfsmittelgesuch für die definitive Brust-Exoprothese ab, weil keine Brustamputation durchgeführt worden sei. B. Das Verwaltungsgericht des Kantons Graubünden hiess die dagegen eingereichte Beschwerde mit Entscheid vom 2. Dezember 2009 gut und verpflichtete die IV-Stelle zur Kostenvergütung für die Brust-Teilprothese (einschliesslich Spezialbüstenhalter). C. Die IV-Stelle führt Beschwerde ans Bundesgericht mit dem Antrag auf Aufhebung des vorinstanzlichen Entscheids. Während P._ auf Abweisung der Beschwerde schliesst, soweit darauf einzutreten sei, verzichtet das Bundesamt für Sozialversicherungen (BSV) auf eine Vernehmlassung.