Если участок ваш  с мужем (нажитое совместно имущество), то и дом не только сына, но и его  жены (тоже совместно нажитое имущество).  Вот это понятно "сейчас дача принадлежит в равной степени нам с мужем, тк участок наш, и моему сыну, тк сделал там всё он", но несправедливо по отношению  к жене сына.Что  касается проживания вашей дочери там - да, имеете полное моральное право  приглашать. Точно так же, как позволили сыну строиться там и пользоваться участком, так и дочери пользоваться участком и тем жильем, которое там есть.