Nacido en Tegernsee, Baviera, Asam trabajó principalmente junto a su hermano, el arquitecto y pintor Cosmas Damian Asam.