Nach Einsicht
in die Verfassungsbeschwerde gegen den Entscheid vom 3. Dezember 2009 des Obergerichts des Kantons Aargau, das auf eine Beschwerde des Beschwerdeführers gegen die erstinstanzliche Erteilung der definitiven Rechtsöffnung an die Beschwerdegegnerin für Fr. 500.-- (nebst Zins und Kosten) nicht eingetreten ist,

in Erwägung,
dass gegen den in einer vermögensrechtlichen Angelegenheit ergangenen Entscheid des Obergerichts mangels Erreichens der Streitwertgrenze (<ref-law>) und mangels Vorliegens einer Ausnahme gemäss <ref-law> allein die subsidiäre Verfassungsbeschwerde nach Art. 113ff. BGG offen steht, weshalb die Eingabe des Beschwerdeführers als solche entgegengenommen worden ist,
dass in einer subsidiären Verfassungsbeschwerde die Rüge der Verletzung verfassungsmässiger Rechte vorzubringen und zu begründen (Art. 117 i.V.m. <ref-law> sowie <ref-law>), d.h. anhand der Erwägungen des kantonalen Entscheids klar und detailliert darzulegen ist, welche verfassungsmässigen Rechte und inwiefern sie durch diesen Entscheid verletzt sein sollen (<ref-ruling> E. 3.1 S. 399), ansonst auf die Beschwerde nicht eingetreten wird (Art. 117 i.V.m. <ref-law>),
dass das Obergericht im Entscheid vom 3. Dezember 2009 erwog, der Beschwerdeführer sei mit (ihm gemäss Empfangsbestätigung am 10. November 2009 zugestellter) Verfügung zur Leistung eines Kostenvorschusses von Fr. 180.-- innert 10 Tagen aufgefordert worden, habe jedoch innerhalb der am 20. November 2009 endenden Frist keine Zahlung geleistet, weshalb androhungsgemäss auf die Beschwerde nicht einzutreten sei,
dass der Beschwerdeführer in seiner Eingabe an das Bundesgericht weder verfassungsmässige Rechte anruft noch in nachvollziehbarer Weise auf die entscheidenden Erwägungen des Obergerichts eingeht,
dass er erst recht nicht nach den erwähnten Anforderungen anhand der obergerichtlichen Erwägungen aufzeigt, inwiefern der angefochtene Entscheid vom 3. Dezember 2009 verfassungswidrig sein soll,
dass im Übrigen der vom Obergericht verlangte Kostenvorschuss keine Sicherstellung von Betreibungskosten im Sinne von <ref-law> darstellt und ausserdem der Grundsatz der Kostenlosigkeit auf Verfahren vor den kantonalen Aufsichtsbehörden beschränkt ist (<ref-law>), worunter das Rechtsöffnungsverfahren nicht fällt,
dass somit auf die - offensichtlich keine hinreichende Begründung enthaltende - Verfassungsbeschwerde in Anwendung von Art. 117 i.V.m. <ref-law> nicht einzutreten ist,
dass der unterliegende Beschwerdeführer kostenpflichtig wird (<ref-law>),
dass in den Fällen des Art. 117 i.V.m. <ref-law> das vereinfachte Verfahren zum Zuge kommt und die Abteilungspräsidentin zuständig ist,

erkennt die Präsidentin:
1. Auf die Verfassungsbeschwerde wird nicht eingetreten.
2. Die Gerichtskosten von Fr. 200.-- werden dem Beschwerdeführer auferlegt.
3. Dieses Urteil wird den Parteien und dem Obergericht des Kantons Aargau schriftlich mitgeteilt.
Lausanne, 4. Februar 2010
Im Namen der II. zivilrechtlichen Abteilung
des Schweizerischen Bundesgerichts
Die Präsidentin: Der Gerichtsschreiber:
Hohl Füllemann