Rok później, podczas igrzysk olimpijskich w Lake Placid uzyskał piąty wynik w skokach oraz siódmy na trasie biegu, co dało mu w efekcie czwarte miejsce. Walkę o brązowy medal przegrał z Vinjarengenem. Ostatni sukces osiągnął na mistrzostwach świata w Sollefteå w 1934 roku. Ponownie wywalczył srebrny medal, tym razem wyprzedził go Oddbjørn Hagen, a trzecie miejsce przypadło Vinjarengenowi. Kolterud był także członkiem reprezentacji Norwegii na igrzyska olimpijskie w Garmisch-Partenkirchen w 1936 roku, ale z powodu kontuzji nie wystąpił w zawodach.