Ο Πίτερ Λόρε γεννήθηκε σαν Λάζλο Λέβενσταϊν το 1904 στη σημερινή Σλοβακία (τότε τμήμα της Αυστροουγγαρίας), και ήταν το πρώτο παιδί μιας οικογένειας Ουγγροεβραίων. Όταν μετά το θάνατο της μητέρας του ο πατέρας του ξαναπαντρεύτηκε (το 1908-1909), οι σχέσεις του με την μητριά του δεν ήταν καθόλου καλές και αυτό σημάδεψε τα παιδικά του χρόνια. Το ξέσπασμα του Β' Βαλκανικού Πολέμου οδήγησε την οικογένεια στο να μετοικήσει στη Βιέννη.