Citation: 4A_645/2020 E. A

A.a. X.A.________ et Y.A.________, copropriétaires de la parcelle n° aaa sise à Grône, souhaitaient y ériger une villa. Ils ont chargé B.________ Sàrl (ci-après: B.________) de préparer le dossier de mise à l'enquête publique. Pour la réalisation des plans de l'ouvrage, B.________ a fait appel à un bureau d'architecture. L'autorisation de construire a été délivrée le 26 juin 2007. Dans le cadre de la construction de la villa, les époux A.________ ont confié à B.________ un certain nombre de travaux, lesquels ont été exécutés par des entreprises tierces. Il s'agit notamment de la maçonnerie, des chapes, de la couverture/ferblanterie, des fenêtres et des stores/volets. Les travaux se sont déroulés entre l'automne 2007 et le printemps 2008. A.b. Par lettre recommandée du 7 novembre 2008, les époux A.________ ont signalé à B.________ plusieurs défauts, dont les suivants: - jambes de force en maçonnerie non ferraillées avec la dalle - vide entre les briques trop important - fenêtres présentant un vide à la suite de reprises de maçonnerie, compensé par de la mousse expansive - infiltrations d'eau et de goudron dans la salle de bain du sous-sol - tablette de la fenêtre du sous-sol trop courte - absence du caisson de store prévu sur la fenêtre de l'atelier - fissure d'environ 30 cm dans les WC. Par le même courrier, les époux A.________ ont contesté le montant réclamé par B.________ pour les travaux de béton-maçonnerie, le solde encore dû à l'entreprise C.________ AG étant consigné. Tous les avis des défauts ont été transmis aux diverses entreprises concernées, notamment à C.________ AG, laquelle affirmera avoir procédé aux travaux de retouche et à toutes les réparations. A.c. Le 8 mars 2010, B.________ a adressé aux époux A.________ une facture d'un montant total de 278'753 fr.25 comprenant les factures des sous-traitants ainsi qu'un poste à hauteur de 12'512 fr.10 pour la surveillance du chantier par D.________, l'un des associés gérants de B.________. Le 6 mai 2010, les époux A.________ ont contesté avoir convenu avec B.________ des honoraires pour la surveillance des sous-traitants; ils ont également souligné la persistance de nombreux défauts. A.d. Le 7 juillet 2013, les époux A.________ ont fait notifier à B.________ un commandement de payer pour un montant de 150'000 fr., indiquant comme cause de l'obligation les défauts dans la construction de leur villa. B.________ a formé opposition. A.e. Le 10 octobre 2013, B.________ a adressé aux époux A.________ une facture intitulée "Travaux exécutés pour Mme et M. Y.A.________" reprenant pour l'essentiel les postes de la facture du 8 mars 2010 et indiquant au regard de chaque poste les montants payés. Le 7 juillet 2014, B.________ a fait notifier aux époux A.________, séparément, un commandement de payer le montant de 45'405 fr.95, indiquant comme cause de l'obligation le "décompte de construction" du 8 mars 2010 (poursuites nos xxx et yyy de l'Office des poursuites du district de Sierre). Chacun des poursuivis a formé opposition.