Als sich Rogers Vater wenig später an der Rebellion der Marcher Lords gegen den königlichen Günstling Hugh le Despenser beteiligte und damit die Gunst von König Eduard II. verlor, übertrugen seine Eltern ihre irischen Besitzungen an Roger. Nachdem sein Vater sich im Januar 1322 dem König ergeben musste, wurden Roger und sein älterer Bruder Edmund verhaftet und in Windsor Castle inhaftiert. Als sein Vater im September 1326 mit einem Heer in England landete, um die Herrschaft von Eduard II. zu stürzen, wurden Roger, Edmund und ihr jüngerer Bruder John am 1. Oktober in den Tower of London verlegt. Nachdem die Herrschaft von Eduard II. in London wenig später zusammenbrach, wurde der Tower am 16. Oktober den Aufständischen übergeben und die Brüder kamen frei.