Am 3. Februar 2012 wurde Ipgraves Ernennung zum Gebietsbischof ("Area Bishop") von Woolwich in der Diözese von Southwark bekanntgegeben. Er wurde in dieser Position Nachfolge von Christopher Chessun, der zum Diözesanbischof von Southwark ernannt worden war. Am 21. März 2012 wurde er während eines Gottesdienstes in der Southwark Cathedral vom damaligen Erzbischof von Canterbury, Rowan Williams, zum Bischof geweiht. Im Mai 2013 sprach Ipgrave während eines Gottesdienstes in der St Peter the Apostle Church in Woolwich ein Bittgebet für den von Islamisten ermordeten britischen Soldaten Lee Rigby.