Это потому что чаще люди не умеют сочетать. Это с джинсами только можно не сочетать. Наверно единственное сочетание когда к хлопку можно и вельвет, и шерсть, и шелк. Но жакет из хлопка к шерстяным брюкам  - ни ни.Или бархатный жакет к шерстяным брюкам.Точь в точь не надо, но это нужно очень тонко чувствовать когда явно не сочетается. И лучше чтобы жакет был темнее брюк.