પૃષ્ઠોને અથવા આખી વેબસાઇટ કેટલાક સંપૂર્ણપણે સ્વયંસંચાલિત ક્રાઉલિંગ પ્રક્રિયા ગુમાવેલા છે, કારણ કે  તમારી સાઇટ શોધ પર પૃષ્ઠો  ઇન્ડેક્સીંગ - રોબોટ.