22 марта 1799 года князь Долгоруков был назначен шефом Кавалергардского корпуса гр. Литта. В августе того же года князь был назначен в корпус генерала Римского-Корсакова, действовавший против французов в Швейцарии, и прибыл к месту нового назначения накануне несчастного Цюрихского сражения. После того он лишился бригады и был назначен членом Военной коллегии. В феврале 1800 года ему велено состоять по армии, а 7 марта того же года он был отставлен от службы. В ноябре 1800 года он снова был принят на службу в Татарско-Литовский полк, но уже в марте 1801 года снова уволен от службы. Наконец, после воцарения императора Александра І, князь Владимир Петрович ещё раз поступил на службу и был назначен шефом того же Татарско-Литовского полка.