बाबर पर अपने परिवार की ज़िम्मेदारी बहुत कम उम्र में ही आ गई थी| अपने पैतृक स्थान फरगना को वे जीत तो गए थे, लेकिन ज्यादा दिन तक वहां राज नहीं कर पाए, वे इसे कुछ ही दिनों में हार गए| जिसके बाद उसे बहुत कठिन समय देखना पड़ा, और उन्होंने बहुत मुश्किल से जीवन यापन किया| लेकिन इस मुश्किल समय में भी वे उनके कुछ वफादारों ने उनका साथ नहीं छोड़ा| कुछ सालों बाद जब उसके दुश्मन एक दुसरे से दुश्मनी निभा रहे थे, तब इस बात का फायदा बाबर ने उठाया और वे 1502 में अफगानिस्तान के काबुल को जीत लिए| इसके साथ ही उन्होंने अपना पैतृक स्थान फरगना व समरकंद को भी जीत लिया| बाबर की 11 बेगम थी, जिससे उसको 20 बच्चे हुए थे| बाबर का पहला बेटा हुमायूँ था, जिसे उसने अपना उत्तराधिकारी बनाया था|