ह्युगो जोसेफ दम्पतीको तेस्रो छोराका रुपमा सन् 1802 मा जन्मिए । बाबू जोसेफ लियोपोल्ड नेपोलियन पक्षधरका थिए भने आमा सोफि क्याथोलिक थिइन् । ह्युगोको बाल्यकाल फ्रान्सको राजनीतिक उथलपुथलमा रह्यो, ह्युगो जन्मेको 2 वर्षपछि नेपोलियन फ्रान्सको शासक बने । पछि ह्युगो तेह्र वर्षको हुदाँ बोर्बन साम्राज्य पुन: फर्कियो । ह्युगोको बाबू जोसेफ नेपोलियनको सैन्य पदाधिकारी हुनाले ह्युगोले विभिन्न ठाउँहरू घुम्न पाए । बाल्यकालमा ह्युगोले नेप्लस्, मेडिटेरिनियन र रोमहरू घुम्ने अवसर पाए । 