Вы ничего не написали про форму управления домом и поэтому ответить на ваш вопрос не возможно. Например, если косьержку наняла УК, на основании решения собственников и вы платите официально, то отказаться нельзя. А если коньержка взялась  неизвестно откуда и ей наликом жильцы прямо в карман платят, то такую можно послать)