Som femåring spilte han piano. Han var venn med Eero Heinonen. Da de begynte på gymnaset på begynnelsen av 1990-tallet traff de Pauli Rantasalmi og Janne Heiskanen. De bestemte seg for å starte et eget band. Ylönens søster Hannah sa at Lauri burde satse på stemmen, og det gjorde han. Lauri skrev senere låten til henne (låten er med på The Rasmus debutalbum ). I slutten av 1994 startet de bandet , som idag heter The Rasmus. Kort tid etter hoppet han av skolen for å kunne bruke mer tid på musikken.