Sachverhalt: A. A._, geboren 1981, meldete sich am 17. Februar 2014 bei der Eidgenössischen Invalidenversicherung zum Leistungsbezug an. Die IV-Stelle des Kantons Aargau liess sie im Rahmen der Abklärungen durch das Zentrum für Medizinische Begutachtung, Basel, ZMB, polydisziplinär begutachten (Gutachten vom 13. Juli 2016) und verneinte einen Rentenanspruch mit Verfügung vom 12. April 2017. Mit Entscheid vom 2. November 2017 hob das Versicherungsgericht des Kantons Aargau die Verfügung auf und wies die Sache zur weiteren Abklärung und Neuverfügung an die IV-Stelle zurück. Daraufhin liess die IV-Stelle A._ erneut durch die ZMB interdisziplinär begutachten. Gestützt auf das Gutachten vom 18. September 2018 sprach sie der Versicherten mit Verfügungen vom 18. April 2019 (wie vorbeschieden) ab 1. August 2014 eine Viertelsrente und ab 1. Februar 2018 eine ganze Rente der Invalidenversicherung sowie entsprechende Kinderrenten zu. B. Mit Entscheid vom 3. Januar 2020 wies das Versicherungsgericht des Kantons Aargau die dagegen erhobene Beschwerde ab. C. A._ lässt Beschwerde in öffentlich-rechtlichen Angelegenheiten erheben und beantragt, in Aufhebung des angefochtenen Entscheids sei ihr rückwirkend ab 1. August 2014 bis 31. Januar 2018 eine halbe Rente (nebst entsprechender Kinderrenten) auszurichten. Gleichzeitig ersucht sie um unentgeltliche Rechtspflege. Das Bundesgericht holte die vorinstanzlichen Akten ein. Ein Schriftenwechsel wurde nicht durchgeführt.