Дети и мужа  тоже, заметьте.  Дети  должны проживать с родителями.  Любым из родителей.  Если дети находятся по месту жительства отца  - его обязанность  осуществлять за ними присмотр в это время. К тому же дети всего вероятнее там и прописаны, с отцом.  У  автора-то нет  другого  жилья. Так что  полное право имеют до совершеннолетия или до момента  совместного снятия с рег учета вместе с папашей.