W czasie II wojny światowej w miejscowości i okolicy znajdowały się obozy dla jeńców alianckich – początkowo francuskich, potem sowieckich, oraz zestrzelonych lotników. Wielu z nich spoczywa na leśnym cmentarzu. Po wojnie miejscowych Niemców wysiedlono, a wieś mocno się wyludniła. Pod koniec lat 40. żyło tutaj jeszcze kilkuset Niemców, ale równie duża liczba Greków – uchodźców z Grecji po wojnie domowej, a oprócz nich także Czesi, Słowacy, Węgrzy, Czesi z Wołynia, a także rumuńscy Słowacy i Bułgarzy. W roku 1950 mieszkało w niej tylko 415 osób (dla porównania w 1939 – 2148). Ubyła także setka budynków. Obecnie także liczba mieszkańców (411 – w tym 325 Czechów, 5 Morawian i 3 Ślązaków, 43 Słowaków, 21 Niemców, 3 Polaków; podział wyznaniowy: 159 rzymskich katolików, 1 husyta, 3 ewangelików, 1 Świadek Jehowy, 169 bez wyznania, 71 nie podało) daleka jest od tej z przeszłości, kiedy Heřmanovice miały status miasta.