Sachverhalt: A. In einem von A.X._, B.X._ und C.X._ (Beschwerdeführer) gegen die Y._ AG (Vermieterin) eingeleiteten Verfahren betreffend Kündigungsanfechtung und Erstreckung gab der Präsident der Schlichtungsbehörde für Miete und Pacht Bucheggberg-Wasseramt dem Gesuch der Beschwerdeführer um unentgeltliche Prozessführung mit Verfügung vom 17. Juni 2011 zufolge Aussichtslosigkeit nicht statt. Die dagegen erhobene Beschwerde wies das Obergericht des Kantons Solothurn am 1. September 2011 ab, ebenso wie das Gesuch um unentgeltliche Prozessführung für das Beschwerdeverfahren. B. Die Beschwerdeführer beantragen dem Bundesgericht mit Verfassungsbeschwerde im Wesentlichen, die kantonalen Gerichte anzuweisen, ihnen für das Verfahren vor der jeweiligen Instanz die verlangte unentgeltliche Rechtspflege zu gewähren, und stellen auch für das Verfahren vor Bundesgericht ein Gesuch um unentgeltliche Prozessführung. Vernehmlassungen wurden nicht eingeholt.