Сначала договориться с мужем. Потом попытаться договориться с мамой. Например, под предлогом того, что ребенка надо водить по поликлиникам к школе, попробовать получить от нее добровольную временную опеку. Тут вам виднее, реально это или нет.Если реально, то оформить ее, вроде бы на пол года делается. Ну а потом, когда брат будет под вашей временной опекой, можно заниматься постоянной.