ਕ੍ਰੌਲ ਬਜਟ

ਵਰਣਨ : ਕ੍ਰੌਲ ਬਜਟ ਉਹਨਾਂ ਪੰਨਿਆਂ ਦੀ ਸੰਖਿਆ ਹੈ ਜੋ ਇੱਕ ਖੋਜ ਇੰਜਣ ਬੋਟ, ਜਿਵੇਂ ਕਿ Googlebot, ਇੱਕ ਖਾਸ ਸਮੇਂ ਦੇ ਅੰਦਰ ਇੱਕ ਵੈਬਸਾਈਟ 'ਤੇ ਕ੍ਰੌਲ ਅਤੇ ਇੰਡੈਕਸ ਕਰਦਾ ਹੈ। ਖੋਜ ਇੰਜਣਾਂ ਕੋਲ ਸੀਮਤ ਸਰੋਤ ਹੁੰਦੇ ਹਨ, ਇਸ ਲਈ ਉਹ ਹਰੇਕ ਵੈਬਸਾਈਟ ਨੂੰ ਇੱਕ "ਬਜਟ" ਨਿਰਧਾਰਤ ਕਰਦੇ ਹਨ। ਇਹ ਬਜਟ ਸਾਈਟ ਦੀ ਸਰਵਰ ਗਤੀ, ਇਸਨੂੰ ਕਿੰਨੀ ਵਾਰ ਅਪਡੇਟ ਕੀਤਾ ਜਾਂਦਾ ਹੈ, ਅਤੇ ਇਸਦੇ ਸਮੁੱਚੇ ਅਧਿਕਾਰ ਵਰਗੇ ਕਾਰਕਾਂ 'ਤੇ ਨਿਰਭਰ ਕਰਦਾ ਹੈ।

ਜੇਕਰ ਕੋਈ ਵੈੱਬਸਾਈਟ ਹੌਲੀ-ਹੌਲੀ ਲੋਡ ਹੁੰਦੀ ਹੈ, ਇਸ ਵਿੱਚ ਬਹੁਤ ਸਾਰੇ ਰੀਡਾਇਰੈਕਟ ਹਨ, ਜਾਂ ਇਸ ਵਿੱਚ ਬਹੁਤ ਸਾਰੇ ਘੱਟ-ਮੁੱਲ ਵਾਲੇ URL ਪੈਰਾਮੀਟਰ ਹਨ, ਤਾਂ ਬੋਟ ਆਪਣੇ ਨਿਰਧਾਰਤ ਬਜਟ ਨੂੰ ਜਲਦੀ ਵਰਤ ਸਕਦਾ ਹੈ। ਨਤੀਜੇ ਵਜੋਂ, ਇਹ ਮਹੱਤਵਪੂਰਨ ਸਮੱਗਰੀ ਨੂੰ ਖੋਜੇ ਜਾਂ ਇੰਡੈਕਸ ਕੀਤੇ ਬਿਨਾਂ ਸਾਈਟ ਨੂੰ ਛੱਡ ਸਕਦਾ ਹੈ, ਜੋ ਖੋਜ ਨਤੀਜਿਆਂ ਵਿੱਚ ਨਵੇਂ ਪੰਨਿਆਂ ਨੂੰ ਦਿਖਾਈ ਦੇਣ ਤੋਂ ਰੋਕ ਸਕਦਾ ਹੈ।

ਉਦਾਹਰਨ : ਇੱਕ ਔਨਲਾਈਨ ਕੱਪੜਿਆਂ ਦੀ ਦੁਕਾਨ ਉਪਭੋਗਤਾਵਾਂ ਨੂੰ ਰੰਗ, ਆਕਾਰ, ਬ੍ਰਾਂਡ ਅਤੇ ਕੀਮਤ ਦੇ ਅਨੁਸਾਰ ਉਤਪਾਦਾਂ ਨੂੰ ਫਿਲਟਰ ਕਰਨ ਦਿੰਦੀ ਹੈ। ਇਹ ਸੈੱਟਅੱਪ ਲੱਖਾਂ ਵਿਲੱਖਣ URL ਬਣਾਉਂਦਾ ਹੈ। Googlebot ਮਹੱਤਵਪੂਰਨ ਸ਼੍ਰੇਣੀ ਪੰਨਿਆਂ ਨੂੰ ਇੰਡੈਕਸ ਕਰਨ ਦੀ ਬਜਾਏ ਇਹਨਾਂ ਬੇਅੰਤ ਫਿਲਟਰ ਭਿੰਨਤਾਵਾਂ 'ਤੇ ਆਪਣਾ ਕ੍ਰੌਲ ਬਜਟ ਬਰਬਾਦ ਕਰਦਾ ਹੈ। ਕਿਉਂਕਿ ਇਹ ਇਹਨਾਂ ਘੱਟ-ਮੁੱਲ ਵਾਲੇ URL 'ਤੇ ਆਪਣੇ ਸਰੋਤਾਂ ਨੂੰ ਖਤਮ ਕਰਦਾ ਹੈ, ਇਹ ਬ੍ਰਾਂਡ ਦੇ ਨਵੇਂ ਲਾਂਚ ਕੀਤੇ "ਸਮਰ ਕਲੈਕਸ਼ਨ" ਪੰਨੇ ਨੂੰ ਕ੍ਰੌਲ ਕਰਨ ਤੋਂ ਖੁੰਝ ਜਾਂਦਾ ਹੈ। ਨਤੀਜੇ ਵਜੋਂ, ਨਵੇਂ ਉਤਪਾਦ Google ਖੋਜ ਨਤੀਜਿਆਂ ਵਿੱਚ ਦਿਖਾਈ ਨਹੀਂ ਦਿੰਦੇ, ਜਿਸ ਨਾਲ ਸਟੋਰ ਨੂੰ ਕੀਮਤੀ ਜੈਵਿਕ ਟ੍ਰੈਫਿਕ ਦਾ ਨੁਕਸਾਨ ਹੁੰਦਾ ਹੈ।