Можно, и влюбляются в маргиналов и бомжей. Другое дело, любят ведь не только за внешность, но и за качества характера, схожесть со своими. Чтобы полюбить, надо сначала начать общаться. Например я не пересекусь по жизни ни с бомжом, ни с маргиналом, нам не о чем будет разговаривать, поэтому любви не от куда будет взяться. И я не полюблю человека с отличным от моего бэкграундом вообще, с другими жизненными убеждениями - он мне будет просто не интересен, любви, опять же, не от куда будет взяться.