Balduin fulgte sine brødre så langt som til Heraklea i Lilleasia hvor han dro bort fra hovedarméen til korsfarerne sammen med Tancred for å marsjere inn i Kilikia. Tancred var antagelig på leting etter et landområde hvor han kunne etablere seg som en mindre hersker i øst, og Balduin kan ha hatt det samme målet. I hans fravær ble hans kone syk og døde ved Marash, noe som betydde at Balduin ikke lenger kunne støtte seg på sin kones land. Noen historikere har antydet at hele hans strategi forandret seg fra dette tidspunktet av, andre tror at endringen skjedde tidligere.