Willkür (Entschädigung; Strafverfahren), hat sich ergeben: A.- Das Bezirksamt Zofingen büsste A. und B. X._ in einem Strafbefehl vom 25. März 1999 mit je Fr. 350.--, weil sie ihren Sohn C. vom Schulunterricht fern gehalten hätten. Nach Beizug eines Rechtsbeistands erhoben A. und B. X._ gegen diesen Strafbefehl am 8. April 1999 Einsprache. An dieser hielten sie mit Schreiben vom 20. Mai 1999 fest, nachdem ihnen Akteneinsicht gewährt worden war. Am 10. Juni 1999 stellte die Staatsanwaltschaft des Kantons Aargau das Strafverfahren ein. A. und B. X._ stellten daraufhin ein Begehren um Entschädigung für Fr. 1'897. 70 Anwaltskosten. Die Staatsanwaltschaft hiess dieses Begehren am 13. Dezember 1999 im Betrag von Fr. 833. 45 gut. A. und B. X._ fochten die staatsanwaltliche Verfügung bei der Beschwerdekammer in Strafsachen des Obergerichts des Kantons Aargau an. Diese Beschwerde wurde mit Entscheid vom 2. Februar 2000 teilweise gutgeheissen und die Entschädigung auf Fr. 1'230. 10 hinaufgesetzt. B.- A. und B. X._ führen gegen den obergerichtlichen Entscheid staatsrechtliche Beschwerde und beantragen, dieser sei aufzuheben. Sie rügen, sowohl die Kürzung der von ihrem Rechtsvertreter geltend gemachten Arbeitsstunden als auch die Festlegung des diesem geschuldeten Stundenhonorars seien willkürlich. Das Obergericht beantragt, auf die Beschwerde sei nicht einzutreten, eventuell sei sie abzuweisen. Die Staatsanwaltschaft beantragt eine Abweisung der Beschwerde, während das Bezirksamt auf eine Vernehmlassung verzichtet.