Sachverhalt: A. A.A._ und B.A._ (Gesuchsteller, Beschwerdeführer) reichten am 4. Mai 2015 bei der Schlichtungsbehörde für Miete und Pacht des Bezirks Bremgarten ein Schlichtungsbegehren betreffend Anfechtung einer Kündigung wegen Zahlungsverzugs ein. Zugleich ersuchten sie für das Schlichtungsverfahren um Bewilligung der unentgeltlichen Rechtspflege unter Bestellung eines unentgeltlichen Rechtsbeistandes. Der Präsident der Schlichtungsbehörde lehnte das Gesuch um unentgeltliche Rechtspflege mit Verfügung vom 11. Mai 2015 ab. Eine von den Gesuchstellern dagegen erhobene Beschwerde wies das Obergericht des Kantons Aargau mit Entscheid vom 22. Juni 2015 ab. Zugleich wies es ein Gesuch um Gewährung der unentgeltlichen Rechtspflege für das obergerichtliche Verfahren wegen Aussichtslosigkeit der gestellten Begehren ab und auferlegte den Gesuchstellern eine Entscheidgebühr von Fr. 200.--. B. Die Gesuchsteller beantragen mit Beschwerde in Zivilsachen vom 3. August 2015, es sei der Entscheid vom 22. Juni 2015 aufzuheben und ihnen für die Verfahren vor der Mietschlichtungsstelle und vor dem Obergericht die unentgeltliche Rechtspflege zu bewilligen und ein unentgeltlicher Rechtsvertreter zu bestellen. Gleichzeitig ersuchen sie um Gewährung der unentgeltlichen Rechtspflege und Rechtsverbeiständung für das bundesgerichtliche Verfahren. Die Beschwerdeführer bekräftigten ihren Standpunkt in einer zusätzlichen Eingabe vom 19. August 2015 sowie mit einem weiteren Schreiben vom 17. September 2015. Auf die Einholung von Vernehmlassungen zur Beschwerde wurde im vorliegenden Fall verzichtet.