Im 13. Jahrhundert begann das Vordringen der ungarischsprechenden Bevölkerung nach Norden. Die Ungarn besiedelten bald die gesamte Ida-Niederung, die im 15. Jahrhundert als weitgehend magyarisiert galt. Nördlich von Paňovce, am Fuß des Slowakischen Erzgebirges kam diese Migration zum Stehen – die Bergregionen blieben überwiegend slowakischsprachig. In der zweiten Hälfte des 16. Jahrhunderts kam es wegen der drohenden Türkenkriege zu einer zweiten ungarischen Einwanderungswelle. In der ersten Hälfte des 17. Jahrhunderts war Paňovce vollständig magyarisiert. Aus dieser Zeit stammt auch die reformierte Kirche. Nach 1720 kam es zu einer entgegengesetzten Bewegung der Bevölkerung von Norden nach Süden – slowakische Einwanderer besiedelten ungarische Dörfer. Im Jahr 1851 zählte man in Paňovce 815 (meist slowakische) Katholiken, 107 (ungarische) Calvinisten und Protestanten sowie 71 Juden.