Durante el tiempo en el que los Baudelaire viven con él, Olaf los trata horriblemente, abofeteando a Klaus en la cara, colgando a Sunny desde una torre en una jaula, e intentando casarse con Violet para heredar la fortuna de los Baudelaire.