Nach Einsicht
in die Verfassungsbeschwerde gegen den Entscheid vom 18. November 2009 des Obergerichts des Kantons Aargau, das eine Beschwerde des Beschwerdeführers gegen die Erteilung der definitiven Rechtsöffnung an die Beschwerdegegnerin für Fr. 4'516.25 abgewiesen hat,

in Erwägung,
dass gegen den in einer vermögensrechtlichen Angelegenheit ergangenen Entscheid des Obergerichts mangels Erreichens der Streitwertgrenze (<ref-law>) und mangels Vorliegens einer Ausnahme gemäss <ref-law> (insbesondere mangels Vorliegens einer Rechtsfrage von grundsätzlicher Bedeutung) allein die subsidiäre Verfassungsbeschwerde nach Art. 113ff. BGG offen steht, weshalb die Eingabe des Beschwerdeführers als solche entgegengenommen worden ist,
dass in einer subsidiären Verfassungsbeschwerde die Rüge der Verletzung verfassungsmässiger Rechte vorzubringen und zu begründen (Art. 117 i.V.m. <ref-law> sowie <ref-law>), d.h. anhand der Erwägungen des kantonalen Entscheids klar und detailliert darzulegen ist, welche verfassungsmässigen Rechte und inwiefern sie durch diesen Entscheid verletzt sein sollen (<ref-ruling> E. 3.1 S. 399), ansonst auf die Beschwerde nicht eingetreten wird (Art. 117 i.V.m. <ref-law>),
dass das Obergericht im Entscheid vom 18. November 2009 erwog, die Betreibungsforderung stütze sich auf einen rechtskräftigen Beschluss des Gemeinderats Y._ vom 7. Mai 2007 (Baubewilligungs- und andere Gebühren) und damit auf einen definitiven Rechtsöffnungstitel, im Rechtsöffnungsverfahren dürfe der Rechtsöffnungsrichter die materielle Richtigkeit des Rechtsöffnungstitels nicht überprüfen, gegen diesen Titel habe der Beschwerdeführer keine Beschwerde erhoben, weshalb er rechtskräftig geworden und die Rechtsöffnung zu Recht erteilt worden sei,
dass der Beschwerdeführer in seiner Eingabe an das Bundesgericht nicht nach den gesetzlichen Anforderungen auf die entscheidenden Erwägungen des Obergerichts eingeht,
dass er erst recht nicht nach diesen Anforderungen anhand der obergerichtlichen Erwägungen aufzeigt, inwiefern der Entscheid vom 18. November 2009 des Obergerichts verfassungswidrig sein soll,
dass es insbesondere nicht genügt, den Sachverhalt aus eigener Sicht zu schildern und die Rechtsöffnungsforderung materiell zu bestreiten,
dass somit auf die - offensichtlich keine hinreichende Begründung enthaltende - Verfassungsbeschwerde in Anwendung von Art. 117 i.V.m. <ref-law> nicht einzutreten ist,
dass der unterliegende Beschwerdeführer kostenpflichtig wird (<ref-law>),
dass in den Fällen des Art. 117 i.V.m. <ref-law> das vereinfachte Verfahren zum Zuge kommt und die Abteilungspräsidentin zuständig ist,

erkennt die Präsidentin:
1. Auf die Verfassungsbeschwerde wird nicht eingetreten.
2. Die Gerichtskosten von Fr. 600.-- werden dem Beschwerdeführer auferlegt.
3. Dieses Urteil wird den Parteien und dem Obergericht des Kantons Aargau schriftlich mitgeteilt.
Lausanne, 26. Januar 2010
Im Namen der II. zivilrechtlichen Abteilung
des Schweizerischen Bundesgerichts
Die Präsidentin: Der Gerichtsschreiber:
Hohl Füllemann