Faits:
A. Le 2 décembre 2002, vers 12 h. 20, X._ conduisait un car postal sur la route cantonale, à la sortie de la Brévine en direction des Tallières. Il avait l'intention d'effectuer un demi-tour afin de regagner le dépôt des cars postaux, situé au sud de la chaussée. Dans ce but, il s'est dans un premier temps déporté sur la droite, avant d'obliquer sur la gauche. C'est alors qu'un choc s'est produit entre l'avant gauche du car et le flanc droit de l'automobile conduite par Y._, qui avait entrepris le dépassement du car. A la suite du choc, le véhicule de Y._ est allé terminer sa course contre un autre autocar, déjà stationné devant le dépôt, où il s'est immobilisé, hors d'usage.
B. Par ordonnance pénale du 20 décembre 2002, le Procureur général a condamné chacun des conducteurs à une amende de 250 fr. et une part de frais.
C. Statuant le 7 avril 2003 sur opposition des deux condamnés, le Tribunal de police du district du Locle a maintenu à 250 fr. le montant de l'amende infligée à X._, ramenant par ailleurs celle de Y._ à 200 fr.
Considérant que l'art. 13 al. 5 OCR s'appliquait à la manœuvre entreprise par X._, ce que celui-ci ne contestait d'ailleurs pas, et estimant qu'il ne pouvait prétendre avoir pris des précautions particulières, la cour cantonale a admis qu'il avait contrevenu à cette disposition et, partant, à l'<ref-law>.
D. X._ se pourvoit en nullité contre cet arrêt. Invoquant une violation des <ref-law> et 13 al. 5 OCR, il conclut à l'annulation de l'arrêt attaqué et au renvoi de la cause à l'autorité cantonale pour qu'elle statue à nouveau. A l'appui de ses conclusions, le recourant prétend avoir fait preuve de toute l'attention nécessaire et soutient qu'il doit être mis au bénéfice du principe de la confiance.

Le Tribunal fédéral considère en droit:
1. Conformément à l'<ref-law>, le conducteur qui veut modifier sa direction de marche, par exemple pour obliquer, est tenu d'avoir égard aux usagers de la route qui viennent en sens inverse ainsi qu'aux véhicules qui le suivent. Cette obligation impose en particulier un devoir d'observer, de sorte que celui qui entend obliquer sur sa gauche doit faire usage de tous les moyens dont il dispose pour observer le trafic, ce qui suppose de regarder dans les rétroviseurs intérieur et extérieur ainsi que le cas échéant par-dessus l'épaule pour s'assurer qu'aucun véhicule ne se trouve dans l'angle mort (voir Schaffhauser, Grundriss des schweizerischen Strassenverkehrsrechts, 2e éd., Berne 2002, vol. I, n° 757). En outre, lorsqu'un conducteur qui entend obliquer est obligé au préalable de se déplacer vers le côté opposé, notamment à cause des dimensions de son véhicule, l'art. 13 al. 5 OCR exige de lui qu'il prenne des précautions particulières et au besoin qu'il s'arrête.
En l'espèce, il ressort des constatations de l'arrêt attaqué, qui lient le Tribunal fédéral saisi d'un pourvoi en nullité (art. 277bis al. 1 PPF), qu'en faisant preuve de l'attention requise le recourant ne pouvait pas ne pas voir le véhicule de Y._ entre le dernier virage de la localité et le lieu de l'accident. Force est donc d'admettre que le recourant n'a pas voué toute l'attention nécessaire au trafic et que s'il l'avait fait il aurait eu conscience de la présence d'un véhicule arrivant derrière lui et de la nécessité de s'assurer de l'endroit où celui-ci se trouvait avant d'effectuer une manœuvre susceptible de couper sa trajectoire. Peu importe par ailleurs que le recourant ait enclenché son clignotant puisque le respect de la règle qui impose de signaler son intention aux autres usagers de la route ne dispense pas d'observer les précautions nécessaires (<ref-law>). Dans ces circonstances, c'est à juste titre que l'autorité cantonale a considéré que le recourant n'avait pas satisfait au devoir de prudence qui lui était imposé par les <ref-law> et 13 al. 5 OCR.
Le moyen tiré par le recourant d'une violation du principe de la confiance doit être rejeté. Ce principe, déduit de l'<ref-law>, permet à l'usager de la route qui se comporte réglementairement d'attendre des autres usagers, aussi longtemps que des circonstances particulières ne doivent pas l'en dissuader, qu'ils se comportent également de manière conforme aux règles de la circulation (<ref-ruling> consid. 2a p. 136; <ref-ruling> consid. 2d/aa p. 253 s.; <ref-ruling> consid. 4a p. 280 s.). Il ne peut toutefois être invoqué que par celui qui n'a lui-même pas commis de faute de circulation, celui qui viole des règles de circulation et crée ainsi une situation confuse ou dangereuse n'étant pas en droit d'attendre des autres qu'ils parent à ce danger par une attention accrue (<ref-ruling> consid. 2a p. 88 et les références citées).
Dès lors, étant établi que le recourant ne s'est pas conformé aux devoirs de prudence qui lui étaient imposés par la situation, celui-ci ne saurait être mis au bénéfice du principe de la confiance. Le pourvoi doit donc être rejeté.
2. Vu l'issue de la procédure, les frais de la cause doivent être mis à la charge du recourant qui succombe (art. 278 al. 1 PPF).

Par ces motifs, le Tribunal fédéral prononce:
1. Le pourvoi est rejeté.
2. Un émolument judiciaire de 2'000 fr. est mis à la charge du recourant.
3. Le présent arrêt est communiqué en copie à la mandataire du recourant, à la Cour de cassation pénale du Tribunal cantonal et au Ministère public du canton de Neuchâtel.
Lausanne, le 15 décembre 2004
Au nom de la Cour de cassation pénale
du Tribunal fédéral suisse
Le président: La greffière: