Нет, сами же говорите, вода есть. Но она вас не устраивает. А вот бутилированную предоставлять никто не обязан, так же как и фильтры. Если вас не устраивает вода, пишите в обслуживающую организацию типа Мосводоканала, в санэпидстанцию, чтоб брали пробы и т.п. Но вот прессовать на эту темы работодателя просто нет оснований.