Von Kaufmann entró en el campo de ingeniería militar en 1838, sirvió en las campañas del Cáucaso, fue promovido al rango de coronel, y mandó a los zapadores en la batalla de Kars en 1855.