Fisk fu diffamato per tutta la vita a causa del suo stile di vita giudicato immorale ed eccentrico e per il suo modo spregiudicato di condurre gli affari. Tuttavia fu amato e rimpianto dai suoi dipendenti e dalla povera gente che lo amava per la sua generosità, molti avevano con lui un debito di riconoscenza a causa del suo grande impegno di solidarietà nei giorni immediatamente successivi al Grande incendio di Chicago del 1871.