Улучшения краулера

Добавлен конфиг с логином/паролем
Логгирование