Після зникнення в 1702 році, зі смертю Георга Ернеста фон Швайніхена, молодшого відгалуження родини фон Швайніхенів, які проживали в Свінах, у 1713 році замок перейшов до зятя покійного, Себастіана Генріха фон Швейніца. У 1762 році Свіни, які не постраждали ні під час гуситських воєн, ні під час Тридцятилітньої війни, були розграбовані російськими військами під час Семирічної війни. Внаслідок спустошення фон Швайніци виставили замок на торги та в 1769 році продали його прусському державному міністру Йоганну Генріху графу фон Хуршвандту. Однак замок залишився нежилим і далі продовжував руйнуватися. Вдова міністра, передала Свіни свій дочці від другого шлюбу, Терезі фон Шлабрендорф, після якої замок перейшов у спадок до її нащадків, австрійських графів Хойос фон Шпрінценштайнів та залишався у їх власності аж до 1941 року, коли вони були змушені продати замок державі. Вермахт облаштував у замку склад запчастин до літаків.