От оливкового отказываться не надо. Две ложки в день даже не считаются в калораже дня. Впрочем, с таким же успехом замените на льняное или какое нравится. Вопрос скорее в количестве. На нем жарят, льют по полстакана в салаты, а потом удивляются оттуда жир на боках. У масла самая большая калорийность, 100г это фактически дневная калорийность худеющего.