Tidlig på 400-tallet ble det på stedet bygget den bysantinske basilika av biskop Johannes II av Jerusalem. Relikvier attribuert til den hellige Stefanus ble overført til kirken den 26. desember 415. Denne kirken er å se på Madabakartet fra 500-tallet.