Nesten ingen ting kjent om Damianos liv, bortsett fra at han var farmasøyt av yrke, kom fra Odemira i det sydlige Portugal og flyktet til Roma på slutten av 1490-årene. Det opprinnelige navnet kan ha vært Pedro Damião og han kan ha vært en jøde som ble fordrevet da kong Manuel I av Portugal truet alle jøder med dødsstraff, men dette er spekulasjoner.