Han er den eldste sønnen til skuespilleren Stellan Skarsgård. Hans brødre, Gustaf, Bill og Valter, er også skuespillere.