朔州人，西魏八大柱国之一独孤信之子，北周明敬皇后独孤氏的同母弟，独孤伽罗皇后的异母兄弟。他墓志中载“美须髯，好容貌。平叔食饼，未足比伦；安仁掷果，犹为惭德。善隶书，银钩无以渝；好坟典，石经莫不谈。”，看来是继承了独孤信的风采和才华。独孤藏家族祖上原是北魏匈奴部落酋长，北魏末年，独孤信抛弃父母妻子随孝武帝元修去长安投奔宇文泰，后成为西魏八大柱国之一。独孤信在长安复娶二妻，前夫人郭氏生子六人，独孤善、独孤穆、独孤藏、独孤顺、独孤陀、独孤整。独孤藏年八岁，即以父功封武平县开国公，食邑一千九百户。后在齐王宇文宪