Hillarys a été nommé d'après un des premiers colons, John Bertram Hillary (1895-1957), qui était devenu aveugle de l'œil droit tout en combattant à Gallipoli pendant la Première Guerre mondiale. Il est venu dans la région au cours de la Grande Dépression pour vivre de la pêche avec son frère Harry, et construit un hangar sur la plage en 1930. Par la suite, il a élargi à lui-même, pour accueillir sa femme et ses quatre enfants. Pendant de nombreuses années, ils étaient les seuls résidents de ce qui est maintenant Hillarys, et le magasin le plus proche, à North Beach, au sud, était a de .