Pierwszy budynek przy obecnej ul. Jezuickiej 2 został wzniesiony prawdopodobnie w XV-XVI w. Po potopie szwedzkim, podobnie jak większość okolicznych domostw - uległ zniszczeniu, spaleniu lub opuszczeniu, o czym świadczy lustracja z 1658 r. W roku 1773 pisano, że „"wokół Fary istniał tylko jeden dom"”, co potwierdza również plan Bydgoszczy mierniczego Gretha z 1774 r.