A.- Mit Verfügung vom 24. November 1998 sprach die IV-Stelle Bern der 1939 geborenen S._ mit Wirkung ab 1. November 1997 aufgrund eines Invaliditätsgrades von 70 % eine ganze ordentliche Invalidenrente in Höhe von Fr. 1'560.- nebst einer ganzen Zusatzrente für ihren 1936 geborenen Ehegatten, R._, im Betrag von Fr. 468.- zu. Am 2. Februar 2001 gewährte sodann die Ausgleichskasse des Kantons Bern R._ eine Altersrente von Fr. 1'524.- ab 1. Februar 2001. Mit Verfügung vom gleichen Tag, wonach die bisherige Rente neu berechnet wurde, weil der Ehemann das 65. Altersjahr vollendet hatte, erklärte die IV-Stelle, S._ werde ab 1. Februar 2001 eine ganze ordentliche Invalidenrente in Höhe von Fr. 1'566.- ausgerichtet. Sowohl auf der R._ betreffenden Verfügung der Ausgleichskasse als auch auf der an S._ gerichteten Verfügung der IV-Stelle vom 2. Februar 2001 wurde vermerkt, die Summe der beiden Renten eines Ehepaares dürfe nach den gesetzlichen Bestimmungen nicht mehr als 150 % des massgebenden Höchstbetrages einer Altersrente betragen, weshalb der Rentenanspruch plafoniert werde. In beiden Verfügungen wurde ferner auf beiliegende Zusammenstellungen verwiesen, welche zum integrierenden Bestandteil der jeweiligen Verfügung erklärt wurden und im Detail über die angerechneten Erwerbseinkommen und allfällige Erziehungs- oder Betreuungszeiten informieren sollten, und (auf der Rückseite) vermerkt, dass die verfügende Stelle gerne Auskünfte erteile. In der Verfügung der IV-Stelle wurde ausserdem darauf hingewiesen, dass allfällige Auskünfte über die Berechnung und Auszahlung der Rente von der Ausgleichskasse des Kantons Bern erteilt würden. B.- S._ und R._ wandten sich an das Verwaltungsgericht des Kantons Bern mit dem sinngemässen Antrag, die früher von der Invalidenversicherung gewährte Zusatzrente für den Ehemann sei weiterhin zu gewähren. Mit Schreiben vom 12. Februar 2001 teilte der Instruktionsrichter den Versicherten mit, mit dem Erwerb des Anspruchs auf eine Altersrente durch den Ehemann sei der Anspruch auf eine Zusatzrente zur Invalidenrente der Ehefrau entfallen. Jedem Ehepartner werde seine individuell berechnete AHV-Rente ausgerichtet, wobei die Beträge beider Renten zusammen höchstens 150 % der maximalen einfachen Altersrente, die seit 2001 Fr. 2060.- betrage, erreichen dürfe. Ein Ehepaar könne demnach nie mehr als 150 % von Fr. 2060.-, mithin nicht mehr als Fr. 3090.- an Alters- bzw. Invalidenrenten der AHV/IV beziehen. Dieser Betrag von insgesamt Fr. 3090.- sei den Versicherten mit Wirkung ab Februar 2001 zugesprochen worden. Die Beschwerde sei daher aussichtslos. Das Verwaltungsgericht forderte die Versicherten auf, ihm bis 28. Februar 2001 mitzuteilen, ob sie ihre Beschwerde angesichts dieser Darlegungen zurückzögen, und machte sie darauf aufmerksam, dass es ihnen im Urteilsfalle die Verfahrenskosten auferlegen müsse, da sie etwas Gesetzwidriges verlangten. Mit Entscheid vom 5. April 2001 wies das Verwaltungsgericht die Beschwerde ohne Durchführung eines Schriftenwechsels ab und auferlegte den Versicherten unter solidarischer Haftbarkeit eine Gerichtsgebühr von Fr. 800.- wegen mutwilliger Beschwerdeführung. Zur Begründung führte es an, die Versicherten hätten, indem innert Frist kein Beschwerderückzug eingegangen sei, an ihrer Beschwerde festgehalten, obwohl sie vom Instruktionsrichter auf deren offensichtliche Aussichtslosigkeit aufmerksam gemacht worden seien. C.- R._ und S._ führen Verwaltungsgerichtsbeschwerde, in der sie sinngemäss die Aufhebung des vorinstanzlichen Kostenentscheids beantragen. Sie hätten dem Verwaltungsgericht mit nicht eingeschrieben versandtem, beim Gericht unauffindbarem Schreiben mitgeteilt, dass sie aufgrund der Angaben des Instruktionsrichters nicht an ihrem Standpunkt festhielten. Ausserdem habe es sich nicht um eine Beschwerde, sondern lediglich um eine Anfrage gehandelt. Zudem ersuchen sie um Gewährung der unentgeltlichen Rechtspflege, wobei sie keinen Rechtsanwalt beizogen oder beizuziehen wünschen. D.- In Anbetracht des Zeugnisses zur Erlangung der unentgeltlichen Rechtspflege sah das Eidgenössische Versicherungsgericht von der Erhebung eines Kostenvorschusses ab.