Выйдя в мае вы не прервали отпуск по уходу, а вышли на работу на неполное время с сохранением пособия. Получать пособие вы можете лишь при условии нахождения в отпуске по уходу, хоть и работая. А дальше все верно: во время ежегодного отпуска выплата пособия по уходу не производится. Жаль, вам просто это не разъяснили. Но и взыскать с вас не удастся в суде это. Так что если не хотите отдавать, но при этом явно придется испортить отношения, не отдавайте.