Hans eldste søster var kongomisjonæren Gudrun Lindstad. Børresen var gift med misjonær Marie Børresen som døde i 1981. Ekteparet Børresen har to barn. Datteren Thordis Børresen er misjonær i Niger og har tidligere også arbeidet i Kongo og Mali.