Viktor Fishers morfar er den legendariske Poul Pedersen, som var den første som spilte 50-landskamper for det danske A-landslaget. Han var med å ta sølv i OL i Roma i 1960.