我和我现在的老公都是二婚,他有个女儿13岁,我儿子7岁,现在和他结婚也生了个儿子两岁,我前夫是儿子4个月的时候出车祸走的,现在老公不接受我把儿子带在身边,说我们条件不好,以后条件好了再说,可什么时候条件好,要怎样的条件才叫好,就是坚决不能,带来玩可以,我说离婚他也同意了,我该怎么办