I 1877 var Fearnley med på å stifte Christiania Skiklub, hvor han var formann 1885–1910. Han var æresmedlem både i klubben og i Skiforeningen, og i 1919 opprettet han Hoffjegermester Fearnleys fond for norsk idrett.