肌の色に合っていないのかもしれません。黄みの強い肌の色ならイエロー系、ピンクみのある肌の色ならピンク・パープル系、小麦肌なら明るめのカラーなど、茶髪でも似合うカラーが変わります。垢ぬけを気にするなら肌の色に合わせてカラーを選んでみてください。