Η πιο εμπεριστατωμένη εκδοχή αναφέρει ότι ο αρχικός ιδιοκτήτης του Πύργου ήταν ο Χαϊντάρ Πασά, από τον οποίο πήρε το όνομά του τόσο το κτήμα όσο και η ευρύτερη περιοχή. Βάσει της μαρτυρίας του αγωνιστή Χρήστου Βυζάντιου, στην περιοχή υπήρχε κήπος με πύργο στο εσωτερικό του. Βέβαια, ο πύργος αυτός δεν είναι δυνατόν να ταυτιστεί με το Παλατάκι, καθώς η αρχιτεκτονική δομή του δευτέρου ανήκει σε μεταγενέστερο του 1830 ρεύμα. Ο ρομαντικός αρχιτεκτονικός ρυθμός έγινε αρκετά δημοφιλής τα πρώτα χρόνια μετά την Επανάσταση. Πιθανώς, ο προαναφερόμενος πύργος, που υπήρχε στο Χαϊδάρι το 1826, κατεδαφίστηκε, για να οικοδομηθεί το Παλατάκι.