Seit dem 9. Jahrhundert war Birnbach Pfarrsitz mit einer großen Pfarrökonomie. Schon im 12. Jahrhundert ist in Birnbach ein Adelsgeschlecht erwähnt. Von 1241 bis 1248 war Albert Behaim Pfarrer in Birnbach. Seit dem 14. Jahrhundert war es ein herzogliches Amt. Während des Bayerischen Erbfolgekrieges wurde der Ort 1504 eingeäschert. Danach entwickelte sich das neue, im Kern noch heute erhaltene Birnbach. 1673 wurde es zur geschlossenen Hofmark Birnbach erhoben. Die 1483 erbaute spätgotische Kirche brannte 1675 nieder, wurde aber bald darauf wieder aufgebaut. Ihren Turm erhielt sie erst 1828 bis 1831.