Etter at de gikk inn i bysantinsk territorium, var der noen få trefninger med grekerne som også ble rammet av folkekorstoget. Balduin ledet en avdeling som erobret en bro i nærheten av Konstantinopel. Etter at de nådde byen, kunne ikke styrkene holdes igjen, og plyndret det omkringliggende territoriet,. Den bysantinske keiser Alexios I Komnenos ble tvunget til å gi et gissel for å gjenopprette fred. Gisselet, hans sønn og den fremtidige keiser Johannes II Komnenos, ble betrodd Balduins pleie. Ifølge Anna Komnena, gav Balduin en av sine soldater en reprimande for å ha satt seg på Alexios sin trone i Konstantinopel.