В декабре 1807 года, в начале первого французского вторжения, он был в Авейру. Жюно отдал приказ демобилизовать большую часть португальской армии и сформировать из лучших подразделений корпус войск под названием Португальский легион (Legião Lusitana, или Legião Portuguesa). Сильвейра был вызван в Коимбру и стал свидетелем демобилизации 6-го, 9-го, 11-го и 12-го кавалерийских полков. Он попросил об отставке, которая была принята правительством Жюно, и отправился в Порту, чтобы попасть на борт одного из британских кораблей, находящихся в море, и бежать в Бразилию. Этот план провалился, и он отправился в Вила-Реал.