Sachverhalt: A. Der 1941 geborene B._, seit 1. Juni 1995 (auf Grund eines Rückenleidens) Bezüger einer halben, seit 2004 (auf Grund eines infolge Carotisstenose und Papillenatrophie erlittenen Visusverlusts) einer ganzen Rente der Invalidenversicherung, meldete sich am 4. Februar 2005 zum Bezug einer Hilflosenentschädigung an. Nach medizinischen Abklärungen (unter anderem Bericht des Dr. med. Z._ inklusive Beiblatt für die Hilflosigkeit vom 18. Februar 2003) sprach ihm die IV-Stelle des Kantons Bern mit Verfügung vom 23. März 2005 eine Hilflosenentschädigung leichten Grades ab 1. November 2004 wegen schwerer Sehstörung zu. Auf Einsprache hin veranlasste die IV-Stelle einen Abklärungsbericht vom 20. Oktober 2005 mit Bericht der RAD-Ärztin Dr. med. E._ und bestätigte ihre Verfügung mit Einspracheentscheid vom 7. November 2005. Die dagegen erhobene Beschwerde hiess das Verwaltungsgericht des Kantons Bern mit Urteil vom 27. Februar 2006 gut und wies die Sache zur weiteren Abklärung an die IV-Stelle zurück, weil nicht ersichtlich sei, ob der Bedarf an lebenspraktischer Begleitung geprüft worden sei, was auf Grund der Sehbehinderung nicht von vornherein ausgeschlossen werden könne. Auf Beschwerde der IV-Stelle hin wurde die Rückweisung vom Bundesgericht mit Urteil vom 23. Oktober 2007 bestätigt. Die IV-Stelle veranlasste in der Folge erneut einen Abklärungsbericht für Hilflosenentschädigung vom 12. Februar 2008, der von RAD-Arzt Dr. med. A._ und der Abklärungsperson Frau H._ unterzeichnet war, zu den einzelnen Punkten jeweils neben den Abklärungsergebnissen eine kurze Beurteilung durch den Arzt enthielt und dem zusätzlich ein ärztlicher Bericht des Dr. med. A._ beigelegt war. Gestützt darauf sprach die IV-Stelle B._ nach Durchführung des Vorbescheidverfahrens mit Verfügung vom 12. August 2008 erneut eine Hilflosenentschädigung leichten Grades wegen Einschränkung der Sehkraft zu. B. Die dagegen erhobene Beschwerde wies das Verwaltungsgericht des Kantons Bern mit Entscheid vom 19. März 2009 ab. C. Mit Beschwerde in öffentlich-rechtlichen Angelegenheiten lässt B._ beantragen, der vorinstanzliche Entscheid sei insofern aufzuheben, als dem Beschwerdeführer eine Hilflosenentschädigung mittleren Grades zuzusprechen sei. Die IV-Stelle schliesst auf Abweisung der Beschwerde, während das Bundesamt für Sozialversicherungen (BSV) auf eine Vernehmlassung verzichtet.