Silset var tidligere sammen med skuespiller Gine Cornelia Pedersen, og sammen har de ett barn. Pedersen spilte også kjæresten hans i TV-serien .