Sachverhalt: A. Der 1970 geborene, gelernte Gipser X._ war seit 1990 in diesem Beruf selbstständig tätig. Am 21. Juni 2005 meldete er sich bei der Invalidenversicherung zum Leistungsbezug an. Nach Abklärungen in medizinischer und erwerblicher Hinsicht, insbesondere einer BEFAS-Abklärung (Bericht vom 19. April 2006) sowie einer Abklärung an Ort und Stelle vom 8. August 2006 sprach ihm die IV-Stelle des Kantons Aargau nach Durchführung des Vorbescheidverfahrens mit Verfügung vom 19. Oktober 2006 rückwirkend ab 1. November 2004 eine halbe Invalidenrente gestützt auf einen Invaliditätsgrad von 59% zu, wobei sie am 3. November 2006 eine rektifizierte Verfügung erliess, weil die Kinderrenten nicht berücksichtigt worden waren. Im Rahmen einer Rentenrevision wurde X._ gestützt auf den Bericht der Untersuchung durch den Regionalen Ärztlichen Dienst, RAD, Frau Dr. med. T._, vom 26. März 2010 am 7. April 2010 mitgeteilt, er habe weiterhin Anspruch auf eine halbe Rente. Auf Grund telefonischer Hinweise, dass X._ zusammen mit seinem Vater, der ebenfalls eine Invalidenrente bezog, Gipser- und sonstige Bauarbeiten erledige, veranlasste die IV-Stelle eine Observation, welche im Zeitraum vom 5. Oktober 2010 bis 3. Februar 2011 stattfand (Überwachungsbericht vom 22. Februar 2011). Sie führte am 6. April 2011 selbst eine Baustellenkontrolle durch und nahm Informationen betreffend eine Baustellenkontrolle des Zentralpräsidenten des Schweizerischen Maler- und Gipserunternehmerverbandes vom 18. Oktober 2010 zu den Akten (Besprechung vom 28. April 2011). Am 14. April 2011 verfügte sie die sofortige Sistierung der Rente. Nach weiteren Erkenntnissen aus einer Meldung des Amtes für Migration und Integration des Kantons Aargau betreffend Schwarzarbeitskontrolle vom 16. Mai 2011 und Berichten des RAD-Arztes Dr. med. C._, Facharzt für Physikalische Medizin und Rehabilitation, vom 25. November 2010 und 30. Juni 2011 stellte die IV-Stelle X._ mit Vorbescheid vom 25. Juli 2011 die Aufhebung der Rente in Aussicht, was sie am 17. November 2011 mit Wirkung ab 1. Oktober 2010 verfügte. Am 20. Januar 2012 erliess die IV-Stelle sodann die Rückforderungsverfügung für zuviel bezogene Leistungen von Oktober 2010 bis April 2011 im Umfang von Fr. 14'508.-. B. Die gegen beide Verfügungen erhobenen Beschwerden vereinigte das Versicherungsgericht des Kantons Aargau und wies diese mit Entscheid vom 12. Juni 2012 ab. C. Mit Beschwerde in öffentlich-rechtlichen Angelegenheiten lässt X._ beantragen, unter Aufhebung des vorinstanzlichen Entscheides sei ihm ab 1. Oktober 2010 weiterhin eine halbe Rente auszurichten. Von der Rückforderung des Betrages von Fr. 14'508.10 sei abzusehen. Eventualiter sei die Sache zur neuen Beurteilung an die Vorinstanz zurückzuweisen.