В 1838—1848 годах командовал бригом «Аргонавт» в отряде судов, наряженных для содействия сухопутным войскам в военных действиях против горцев в Абхазии. Во время этих экспедиций Рюмин неоднократно бывал в перестрелках с горцами и руководил корабельной артиллерийской поддержкой высаживаемым на берег десантам.