Притянуто за уши. "По болезни женщин не знаю" - речь идет о психическом заболевании в первую очередь. Какие могут быть женщины в том состоянии, в котором пребывал Мышкин до лечения и в которое опять провалился после перенесенного потрясения (уже навсегда)? Жениться-то он собирался, значит, и супружеский долг мог исполнять в принципе.