Big updates of crawler functionnalities