Делайте ровно как вам удобно. Есть настроение и хотите компанию сыну- говорите "да", Или " сегодня нет", без особых пояснений. Не сохранить хороших отношений с племянником, если его мать такая, как ваша сестра. Он отколется скорее всего с возрастом. При всем вашем теплом к нему отношении.