Faits : A. A._, en qualité de locataire (demandeur), et B._, en qualité de bailleur (défendeur), étaient opposés dans un procès de droit du bail devant le Tribunal des baux de Lausanne, " procès auquel participaient également, comme défenderesses, C._ et D._ ". Si la formulation employée par la cour précédente est entachée d'une certaine ambiguïté, il résulte clairement du dossier cantonal que l'objet du bail, l'immeuble loué par le locataire, est détenu en propriété commune par les trois défendeurs (en communauté héréditaire) (complètement d'office selon l'art. 105 al. 2 LTF). Une audience s'est tenue le 4 septembre 2018 devant le Tribunal des baux à laquelle ont comparu le demandeur et son avocat, d'une part, et le défendeur et son conseil, d'autre part. Bien que convoquées, les défenderesses étaient absentes et personne ne les a représentées (complètement d'office selon l'art. 105 al. 2 LTF). Au cours de l'audience, le défendeur a déposé une expertise graphologique privée de laquelle il ressortait qu'une pièce (ci-après : la pièce no 53) produite en procédure par le demandeur était un faux. Après le dépôt de l'expertise, l'audience a été suspendue une première fois pendant 1h25, puis une seconde fois pendant 20 minutes. Après la deuxième suspension, le demandeur et le défendeur ont conclu une transaction judiciaire aux termes de laquelle le premier a notamment renoncé à la plupart de ses prétentions, accepté de déconsigner des loyers en faveur du second et pris l'engagement de lui payer la somme de 20'000 fr. De son côté, le défendeur s'est en particulier engagé à ne pas porter plainte contre le demandeur (ou à le dénoncer) auprès des autorités de poursuite pénale pour le prétendu faux produit dans le procès de droit du bail les opposant. B. Le 4 octobre 2018, le demandeur a appelé de la transaction judiciaire " valant jugement entré en force " du Tribunal des baux du 4 septembre 2018 devant la Cour d'appel civile du Tribunal cantonal vaudois (complètement d'office selon l'art. 105 al. 2 LTF). Il a conclu à ce qu'il soit dit que la transaction judiciaire est nulle et que le défendeur doit restituer un montant de 90'000 fr. au demandeur, intérêts en sus. C. En parallèle, par demande du 3 décembre 2018 adressée au Tribunal des baux de Lausanne, le demandeur a demandé la révision de la transaction du 4 septembre 2018. Il a sollicité son annulation et la reprise de la cause devant l'autorité de première instance. Il a aussi conclu à ce qu'il soit ordonné au défendeur de déposer sur un compte de consignation le montant de 90'000 fr. correspondant aux loyers consignés qui avaient été libérés en sa faveur. Le demandeur fait en particulier valoir qu'il n'avait pas la capacité de discernement au moment de signer la transaction litigieuse. Par jugement du 7 décembre 2018, le Tribunal des baux a rejeté l'intégralité des conclusions de la demande en révision. Par arrêt du 29 janvier 2019, la Chambre des recours du Tribunal cantonal vaudois a rejeté le recours formé par le demandeur et confirmé la décision attaquée. D. Contre cet arrêt cantonal, le demandeur a exercé un recours en matière civile au Tribunal fédéral. Il a conclu à l'admission de la demande de révision, à la réforme de l'arrêt entrepris en ce sens que la transaction judiciaire soit annulée, la cause renvoyée au Tribunal des baux et à ce qu'il soit ordonné au défendeur de déposer sur un compte de consignation le montant de 90'000 fr. Subsidiairement, il a conclu à l'annulation de l'arrêt cantonal, au renvoi de la cause à l'autorité précédente et, en particulier, à ce que celle-ci mette en oeuvre une expertise médicale visant à établir sa capacité de discernement lors de l'audience du 4 septembre 2018. L'intimé (défendeur) a conclu au rejet du recours. Les intimées (défenderesses) ont conclu au rejet du recours dans la mesure de sa recevabilité. Le recourant a encore déposé des observations. E. Par courrier du 22 novembre 2019, l'intimé (défendeur) a remis à la Cour de céans une copie du procès-verbal de l'audience du 6 novembre 2019 de la Cour d'appel civile du Tribunal cantonal vaudois (cf. supra let. B) dans lequel le Juge délégué constate que la tentative de conciliation a abouti dans la cause divisant le demandeur d'avec les trois défendeurs. Le document contient l'accord auquel les parties (en réalité : le demandeur et le défendeur) sont parvenues devant l'autorité d'appel.