Hy neem ongeveer 1684 sy ontslag uit die diens van die V.O.C. en word ’n vryburger (vryliede) in 1684. Die vryburgers was op eie inisiatief vir ’n bestaan afhanklik. Die wette van die Kaap het egter vrye handel verbied. Die vryburgers moes byvoorbeeld drie dae wag nadat ’n besoekende skip geland het alvorens hul, hul produkte aan die besoekers kon verkoop. In dié tydperk het die V.O.C. dan hul produkte verkoop.
Op 5 November 1685 verskyn Jan in die hof op ’n aanklag van sluikhandel.Een bron meld dat hy bogenoemde wagperiode oortree het, terwyl ’n ander meld dat hy ’n kop kool van ’n slaaf Valentyn van Madgascar gekoop het onwetend dat die koolkop uit die tuin van Luitenant Olof Bergh gesteel is! Die vryburgers was genoodsaak om al hul saad en implemente vanaf die V.O.C. te verkry. Na bogenoemde klag teen Jan, kon hy nie verder ’n bestaan as boer maak nie.