24 ноября 1824 года Раевский по собственному прошению был уволен в отпуск «до излечения болезни». 1825 год стал самым трагическим в жизни генерала. Сначала умерла нежно любимая мать — Екатерина Николаевна, а в декабре, после восстания на Сенатской площади, были арестованы сразу трое близких ему людей: брат Василий Львович и мужья дочерей — М. Ф. Орлов и С. Г. Волконский. Все они были высланы из столицы. К следствию по делу декабристов были привлечены и сыновья Раевского — Александр и Николай. Однако с них подозрения были сняты. В конце следующего года Николай Николаевич навсегда простился с любимой дочерью Марией, уехавшей в Сибирь к своему сосланному мужу.