Im Jahre 1806 fiel Viechberg durch die Mediatisierung der gesamten Grafschaft Limpurg an das Königreich Württemberg und wurde dem Oberamt Gaildorf unterstellt. Beim Russlandfeldzug 1812 marschierten mehrere Soldaten aus Viechberg als Teil der Württembergischen Armee mit. Das Jahr ohne Sommer, welches auf die Zeit der Napoleonischen Kriege folgte, führte auch in Viechberg von 1816 bis 1817 zu einer Hungersnot. Während der erneuten Hungersnot von 1852 wurden die armen Familien der besitzlosen Landarbeiter und Kleinbauern dazu aufgefordert, nach Amerika auszuwandern. Am 14. Mai 1855 zerstörte ein Großbrand zahlreiche Häuser in Viechberg. Im Jahre 1872 benannten die verantwortlichen Amtsträger das Pfarrdorf 1872 auf Beschluss des Gemeinderats per Erlass auf den heutigen Namen Fichtenberg um.