Cloudflare ਦਾ AI-crawler ਲਾਇਸੈਂਸਿੰਗ ਮਾਡਲ 1 ਜੁਲਾਈ ਨੂੰ ਲਾਂਚ ਕੀਤਾ ਗਿਆ, ਜਿਸ ਵਿੱਚ ਇਸਦੇ ਪੁਰਾਣੇ “pay-per-crawl” ਸਕੀਮ ਨੂੰ “pay-per-use” ਪ੍ਰਣਾਲੀ ਨਾਲ ਬਦਲ ਦਿੱਤਾ ਗਿਆ ਹੈ, ਜੋ ਹਰ ਵਾਰ ਜਦੋਂ ਕੋਈ ਆਰਟੀਫੀਸ਼ੀਅਲ ਇੰਟੈਲੀਜੈਂਸ (AI) ਸੇਵਾ ਕਿਸੇ ਪੇਜ ਨੂੰ ਪੜ੍ਹਦੀ ਹੈ, ਤਾਂ ਚਾਰਜ ਕਰਦੀ ਹੈ। ਇਹ ਤਬਦੀਲੀ ਸਿਰਫ਼ ਕੀਮਤਾਂ ਵਿੱਚ ਬਦਲਾਅ ਨਹੀਂ ਹੈ – ਇਹ ਇੱਕ ਨਿੱਜੀ ਕੰਪਨੀ ਨੂੰ ਇਹ ਫੈਸਲਾ ਲੈਣ ਦੀ ਸ਼ਕਤੀ ਦਿੰਦੀ ਹੈ ਕਿ ਕੌਣ ਜਨਤਕ ਵੈੱਬ ਤੱਕ ਪਹੁੰਚ ਸਕਦਾ ਹੈ ਅਤੇ ਕਿਹੜੀਆਂ ਸ਼ਰਤਾਂ 'ਤੇ।
ਇਹ ਬਦਲਾਅ ਕਿਉਂ ਮਹੱਤਵਪੂਰਨ ਹੈ
ਸਾਲਾਂ ਤੋਂ Cloudflare ਦੇ ਮੁਫ਼ਤ ਟਾਇਰ (free tier) ਨੇ ਲੱਖਾਂ ਸਾਈਟਾਂ ਨੂੰ ਪ੍ਰਦਰਸ਼ਨ (performance) ਵਧਾਉਣ ਅਤੇ ਅਣਚਾਹੇ ਟ੍ਰੈਫਿਕ ਨੂੰ ਰੋਕਣ ਦਾ ਇੱਕ ਸਸਤਾ ਤਰੀਕਾ ਦਿੱਤਾ ਸੀ। ਜਦੋਂ ਕੋਈ ਬੋਟ ਪੇਜ ਫੈਚ (fetch) ਕਰਦਾ ਸੀ, ਤਾਂ ਆਪਰੇਟਰ ਹਰ ਕ੍ਰੌਲ (crawl) ਲਈ ਇੱਕ ਨਿਸ਼ਚਿਤ ਫੀਸ ਅਦਾ ਕਰਦਾ ਸੀ। ਨਵਾਂ ਮਾਡਲ ਇਸ ਰਿਸ਼ਤੇ ਨੂੰ ਉਲਟਾ ਦਿੰਦਾ ਹੈ: ਪ੍ਰਕਾਸ਼ਕਾਂ ਨੂੰ ਹਰ ਵਾਰ ਉਦੋਂ ਭੁਗਤਾਨ ਮਿਲਦਾ ਹੈ ਜਦੋਂ ਕੋਈ AI ਮਾਡਲ ਉਹਨਾਂ ਦੀ ਸਮੱਗਰੀ ਦੀ ਵਰਤੋਂ ਕਰਦਾ ਹੈ। ਉੱਪਰੋਂ ਦੇਖਣ 'ਤੇ ਇਹ ਸਾਈਟ ਮਾਲਕਾਂ ਲਈ ਇੱਕ ਜਿੱਤ ਵਾਂਗ ਲੱਗਦਾ ਹੈ, ਜਿਨ੍ਹਾਂ ਨੂੰ ਆਖਰਕਾਰ AI ਦੇ ਉਸ ਹਿੱਸੇ ਵਿੱਚੋਂ ਆਪਣਾ ਹਿੱਸਾ ਮਿਲ ਰਿਹਾ ਹੈ ਜੋ ਉਹਨਾਂ ਦੇ ਕੰਮ ਦੇ ਆਧਾਰ 'ਤੇ ਵਧ ਰਿਹਾ ਹੈ।
ਇਹ ਮਾਡਲ AI ਕ੍ਰੌਲਰਾਂ ਲਈ ਤਿੰਨ ਨਵੀਆਂ ਸ਼੍ਰੇਣੀਆਂ ਵੀ ਪੇਸ਼ ਕਰਦਾ ਹੈ – Search, Agent, ਅਤੇ Training – ਅਤੇ ਕਿਸੇ ਬੋਟ ਨੂੰ ਇਹਨਾਂ ਵਿੱਚੋਂ ਕਿਸੇ ਵੀ ਸ਼੍ਰੇਣੀ ਵਿੱਚ ਰੱਖਣ ਦਾ ਅਧਿਕਾਰ ਸਿੱਧੇ ਤੌਰ 'ਤੇ Cloudflare ਦੇ ਉਤਪਾਦ ਨਿਰਧਾਰਤ ਕਰਦਾ ਹੈ। ਕੰਪਨੀ ਇਹ ਫੈਸਲਾ ਕਰਦੀ ਹੈ ਕਿ ਕੋਈ ਖੋਜ ਬੋਟ (research bot) ਇੱਕ ਜਾਇਜ਼ “Agent” ਹੈ ਜਾਂ “Training” ਬੋਟ, ਜਾਂ ਕੋਈ ਛੋਟੀ ਟੀਮ ਵਾਲਾ ਟੂਲ “Search” ਸੇਵਾ ਹੈ ਜਾਂ “ਬਿਨਾਂ ਲਾਇਸੈਂਸ ਵਾਲਾ ਚੋਰ”। ਉਹ ਵਰਗੀਕਰਨ ਹੀ ਲਾਗੂ ਕੀਤੇ ਜਾਣ ਵਾਲੇ ਰੇਟ ਅਤੇ 15 ਸਤੰਬਰ ਤੋਂ ਸ਼ੁਰੂ ਹੋਣ ਵਾਲੇ ਇਸ ਫੈਸਲੇ ਨੂੰ ਨਿਰਧਾਰਤ ਕਰਦੇ ਹਨ ਕਿ ਕੀ ਵਿਗਿਆਪਨ ਦਿਖਾਉਣ ਵਾਲੇ ਪੇਜਾਂ 'ਤੇ ਬੋਟ ਨੂੰ ਪੂਰੀ ਤਰ੍ਹਾਂ ਬਲੌਕ ਕਰ ਦਿੱਤਾ ਜਾਵੇਗਾ।
ਕੰਟਰੋਲ ਦੇ ਤਰੀਕੇ
- ਤਿੰਨ ਸ਼੍ਰੇਣੀਆਂ, ਇੱਕ ਗੇਟਕੀਪਰ – Cloudflare ਇਕੱਲਾ ਹੀ ਇਹਨਾਂ ਤਿੰਨ ਸਮੂਹਾਂ ਨੂੰ ਪਰਿਭਾਸ਼ਿਤ ਕਰਦਾ ਹੈ। ਕੋਈ ਬਾਹਰੀ ਮਿਆਰੀ ਸੰਸਥਾ ਨਹੀਂ, ਕੋਈ ਉਦਯੋਗ ਸੰਘ (consortium) ਨਹੀਂ, ਅਤੇ ਕੋਈ ਜਨਤਕ ਸਲਾਹ-ਮਸ਼ਵਰਾ ਨਹੀਂ। ਇੱਕ ਬੋਟ ਜੋ “Training” ਸ਼੍ਰੇਣੀ ਵਿੱਚ ਆਉਂਦਾ ਹੈ, ਉਸ ਨੂੰ “Search” ਵਜੋਂ ਲੇਬਲ ਕੀਤੇ ਗਏ ਬੋਟ ਨਾਲੋਂ ਉੱਚੀ ਫੀਸ ਦੇਣੀ ਪੈਂਦੀ ਹੈ, ਭਾਵੇਂ ਕਿ ਅਸਲ ਗਤੀਵਿਧੀ ਲਗਭਗ ਇੱਕੋ ਜਿਹੀ ਹੀ ਕਿਉਂ ਨਾ ਹੋਵੇ।
- ਵਿਗਿਆਪਨਾਂ ਵਾਲੇ ਪੇਜਾਂ 'ਤੇ ਡਿਫੌਲਟ ਬਲੌਕਿੰਗ – ਅੱਧੇ ਸਤੰਬਰ ਤੋਂ, ਕੋਈ ਵੀ ਮਿਸ਼ਰਤ-ਵਰਤੋਂ ਵਾਲਾ ਕ੍ਰੌਲਰ ਜੋ ਵਿਗਿਆਪਨਾਂ ਵਾਲੇ ਪੇਜ 'ਤੇ ਆਉਂਦਾ ਹੈ, ਉਸ ਨੂੰ ਪਹੁੰਚ ਤੋਂ ਇਨਕਾਰ ਕਰ ਦਿੱਤਾ ਜਾਵੇਗਾ ਜਦੋਂ ਤੱਕ ਉਹ Cloudflare ਦੇ ਮਾਪਦੰਡਾਂ ਨੂੰ ਪੂਰਾ ਨਹੀਂ ਕਰਦਾ। ਇਹ ਬਲੌਕ ਸਵੈਚਾਲਿਤ ਹੈ; ਇਸ ਤੋਂ ਬਚਣ ਦਾ ਇੱਕੋ ਇੱਕ ਤਰੀਕਾ ਉਹ ਰੇਟ ਅਦਾ ਕਰਨਾ ਹੈ ਜੋ Cloudflare ਉਸ ਸ਼੍ਰੇਣੀ ਲਈ ਨਿਰਧਾਰਤ ਕਰਦਾ ਹੈ।
- ਇੱਕ ਮਾਰਕੀਟਪਲੇਸ ਜਿਸ ਵਿੱਚ ਵੇਟਿੰਗ ਲਿਸਟ ਹੈ – “ਲਾਇਸੈਂਸਸ਼ੀਅਡ” ਵੈੱਬ ਤੱਕ ਪਹੁੰਚ ਹੁਣ ਸਿਰਫ਼ ਤਕਨੀਕੀ ਯੋਗਤਾ 'ਤੇ ਨਿਰਭਰ ਨਹੀਂ ਹੈ। ਜੋ ਕੰਪਨੀਆਂ ਵੱਡੇ ਪੱਧਰ 'ਤੇ ਕ੍ਰੌਲ ਕਰਨਾ ਚਾਹੁੰਦੀਆਂ ਹਨ, ਉਹਨਾਂ ਨੂੰ Cloudflare ਦੀ ਪ੍ਰਵਾਨਿਤ ਸੂਚੀ ਵਿੱਚ ਸ਼ਾਮਲ ਹੋਣ ਲਈ ਅਪਲਾਈ ਕਰਨਾ ਪਵੇਗਾ। ਜਿਨ੍ਹਾਂ ਨੂੰ ਬਾਹਰ ਰੱਖਿਆ ਜਾਂਦਾ ਹੈ, ਉਹਨਾਂ ਕੋਲ ਦੋ ਸਖ਼ਤ ਵਿਕਲਪ ਹਨ: ਜਾਂ ਤਾਂ Cloudflare ਦੁਆਰਾ ਤੈਅ ਕੀਤੀ ਗਈ ਕੀਮਤ ਨੂੰ ਸਵੀਕਾਰ ਕਰੋ ਜਾਂ ਇੰਟਰਨੈੱਟ ਦੇ ਇੱਕ ਵੱਡੇ ਹਿੱਸੇ ਨੂੰ ਸਕ੍ਰੈਪ (scrape) ਕਰਨ ਦੀ ਸਮਰੱਥਾ ਗੁਆ ਦਿਓ।
- ਬਿਨਾਂ ਵੋਟ ਦੇ ਮਾਲੀਆ – ਜਿਨ੍ਹਾਂ ਸਾਈਟ ਮਾਲਕਾਂ ਨੂੰ ਭੁਗਤਾਨ ਮਿਲਦਾ ਹੈ, ਉਹਨਾਂ ਕੋਲ ਇਹ ਕਹਿਣ ਦਾ ਕੋਈ ਅਧਿਕਾਰ ਨਹੀਂ ਹੈ ਕਿ ਸ਼੍ਰੇਣੀਆਂ ਕਿਵੇਂ ਬਣਾਈਆਂ ਜਾਣੀਆਂ ਹਨ, ਰੇਟ ਕਿਵੇਂ ਬਦਲਣਗੇ, ਜਾਂ ਵ੍ਹਾਈਟਲਿਸਟ (whitelist) ਵਿੱਚ ਕਿਸ ਨੂੰ ਸ਼ਾਮਲ ਕੀਤਾ ਜਾਵੇਗਾ। ਕੀਮਤਾਂ ਦਾ ਢਾਂਚਾ ਅਤੇ “ਸਵੀਕਾਰਯੋਗ” ਕ੍ਰੌਲਿੰਗ ਦੀ ਪਰਿਭਾਸ਼ਾ ਇੱਕ ਕਾਰਪੋਰੇਟ ਉਤਪਾਦ ਸਪੈਕ (product spec) ਦੇ ਪਿੱਛੇ ਹੈ, ਨਾ ਕਿ ਕਿਸੇ ਜਨਤਕ ਨੀਤੀ ਪ੍ਰਕਿਰਿਆ ਦੇ।
ਕੌਣ ਜਿੱਤਦਾ ਹੈ, ਕੌਣ ਹਾਰਦਾ ਹੈ
ਪ੍ਰਕਾਸ਼ਕ (Publishers) – ਤੁਰੰਤ ਲਾਭ ਇੱਕ ਨਵਾਂ ਮਾਲੀਆ ਸਰੋਤ ਹੈ। ਹਰ ਵਾਰ ਜਦੋਂ ਕੋਈ AI ਮਾਡਲ ਇੱਕ ਲੇਖ ਪੜ੍ਹਦਾ ਹੈ, ਤਾਂ ਸਾਈਟ ਦੇ ਮਾਲਕ ਨੂੰ ਭੁਗਤਾਨ ਮਿਲਦਾ ਹੈ। ਛੋਟੇ ਪ੍ਰਕਾਸ਼ਕਾਂ ਲਈ, ਜਿਨ੍ਹਾਂ ਨੂੰ ਟ੍ਰੈਫਿਕ ਤੋਂ ਪੈਸਾ ਕਮਾਉਣ ਲਈ ਸੰਘਰਸ਼ ਕਰਨਾ ਪਿਆ ਹੈ, ਉਹ ਨ
ਨਵੇਂ ਸਿਸਟਮ ਦੇ ਪੱਖ ਵਿੱਚ ਦਲੀਲ ਸਰਲ ਹੈ: AI ਡਿਵੈਲਪਰਜ਼ ਨੇ ਸਿਰਜਣਹਾਰਾਂ ਨੂੰ ਮੁਆਵਜ਼ਾ ਦਿੱਤੇ ਬਿਨਾਂ ਜਨਤਕ ਤੌਰ 'ਤੇ ਉਪਲਬਧ ਟੈਕਸਟ, ਤਸਵੀਰਾਂ ਅਤੇ ਕੋਡ ਤੋਂ ਮੁਨਾਫਾ ਕਮਾਇਆ ਹੈ। Cloudflare ਦਾ ਮਾਡਲ ਇੱਕ ਅਜਿਹਾ ਭੁਗਤਾਨ ਲੂਪ ਬਣਾਉਂਦਾ ਹੈ ਜੋ ਉੱਚ-ਗੁਣਵੱਤਾ ਵਾਲੇ ਕੰਟੈਂਟ ਨੂੰ ਉਤਸ਼ਾਹਿਤ ਕਰ ਸਕਦਾ ਹੈ ਅਤੇ ਪ੍ਰਕਾਸ਼ਕਾਂ ਨੂੰ AI ਅਰਥਵਿਵਸਥਾ ਵਿੱਚ ਹਿੱਸੇਦਾਰੀ ਦੇ ਸਕਦਾ ਹੈ। ਇਹ ਨਿਰਪੱਖ ਸਰਚ ਬੋਟਸ ਅਤੇ ਵੱਡੇ ਪੱਧਰ 'ਤੇ ਡਾਟਾ-ਹਾਰਵੈਸਟਿੰਗ ਕਾਰਜਾਂ ਵਿਚਕਾਰ ਅੰਤਰ ਕਰਨ ਦਾ ਇੱਕ ਸਪਸ਼ਟ ਅਤੇ ਲਾਗੂ ਕਰਨ ਯੋਗ ਤਰੀਕਾ ਵੀ ਪ੍ਰਦਾਨ ਕਰਦਾ ਹੈ, ਜੋ ਸੰਭਾਵੀ ਤੌਰ 'ਤੇ ਦੁਰਵਰਤੋਂ ਨੂੰ ਰੋਕ ਸਕਦਾ ਹੈ।
ਹਾਲਾਂਕਿ, ਉਹ ਲਾਭ ਇਸ ਤੱਥ ਨੂੰ ਨਹੀਂ ਮਿਟਾਉਂਦੇ ਕਿ ਨਿਯਮ ਇੱਕਪੱਖੀ ਤੌਰ 'ਤੇ ਤੈਅ ਕੀਤੇ ਗਏ ਹਨ। ਭਾਵੇਂ ਮਾਲੀਆ ਹਿੱਸਾ ਉਦਾਰ ਹੋਵੇ, ਪਰ ਲੋਕਤੰਤਰੀ ਪ੍ਰਕਿਰਿਆ ਦੀ ਘਾਟ ਦਾ ਮਤਲਬ ਹੈ ਕਿ ਜੇਕਰ ਸ਼੍ਰੇਣੀਆਂ ਮਨਮਾਨੀਆਂ ਸਾਬਤ ਹੁੰਦੀਆਂ ਹਨ ਜਾਂ ਦਰਾਂ ਸ਼ੋਸ਼ਣਕਾਰੀ ਬਣ ਜਾਂਦੀਆਂ ਹਨ, ਤਾਂ ਜਨਤਾ ਕੋਲ ਕੋਈ ਰਸਤਾ ਨਹੀਂ ਹੈ। ਇਹ ਮਾਡਲ ਅਗਲੇ ਅਸਪਸ਼ਟ ਫੈਸਲਿਆਂ (ad-blocking heuristics) ਦੇ ਬਦਲੇ ਇੱਕ ਹੋਰ, ਵਿੱਤੀ ਤੌਰ 'ਤੇ ਵਧੇਰੇ ਪ੍ਰਭਾਵਸ਼ਾਲੀ ਫੈਸਲਿਆਂ ਦਾ ਸੌਦਾ ਕਰਦਾ ਹੈ।
ਅੱਗੇ ਕੀ ਦੇਖਣਾ ਹੈ
ਮੁੱਖ ਨਿਸ਼ਕਰਸ਼
Cloudflare ਦਾ 1 ਜੁਲਾਈ ਦਾ ਕੀਮਤਾਂ ਵਿੱਚ ਵੱਡਾ ਬਦਲਾਅ ਵੈੱਬ ਪੇਜ ਪੜ੍ਹਨ ਦੇ ਕਾਰਜ ਨੂੰ ਇੱਕ ਲਾਇਸੈਂਸਯੋਗ ਲੈਣ-ਦੇਣ ਵਿੱਚ ਬਦਲ ਦਿੰਦਾ ਹੈ, ਜਿਸ ਵਿੱਚ ਇੱਕ ਇਕੱਲੀ ਨਿੱਜੀ ਕੰਪਨੀ ਨਿਯਮ ਲਿਖਦੀ ਹੈ ਅਤੇ ਫੀਸ ਇਕੱਠੀ ਕਰਦੀ ਹੈ। ਜਦੋਂ ਕਿ ਪ੍ਰਕਾਸ਼ਕਾਂ ਨੂੰ ਅੰਤ ਵਿੱਚ AI-ਅਧਾਰਿਤ ਖਪਤ ਤੋਂ ਪੈਸਾ ਮਿਲਦਾ ਹੈ, ਇਸ ਦਾ ਵਿਆਪਕ ਨਤੀਜਾ ਡਿਜੀਟਲ ਗੇਟਕੀਪਿੰਗ ਦਾ ਇੱਕ ਨਵਾਂ ਰੂਪ ਹੈ ਜੋ ਇਹ ਮੁੜ-ਨਿਰਮਿਤ ਕਰਦਾ ਹੈ ਕਿ ਕੌਣ ਜਨਤਕ ਇੰਟਰਨੈਟ ਤੱਕ ਪਹੁੰਚ ਕਰ ਸਕਦਾ ਹੈ ਅਤੇ ਕਿਹੜੀਆਂ ਸ਼ਰਤਾਂ 'ਤੇ। ਅਸਲ ਕਹਾਣੀ ਕੀਮਤ ਨਹੀਂ ਹੈ; ਇਹ ਉਸ ਖੇਤਰ ਵਿੱਚ ਕੰਟਰੋਲ ਦੇ ਕੇਂਦਰੀਕਰਨ ਬਾਰੇ ਹੈ ਜਿਸ ਨੂੰ ਲੰਬੇ ਸਮੇਂ ਤੋਂ ਖੁੱਲ੍ਹਾ ਮੰਨਿਆ ਜਾਂਦਾ ਰਿਹਾ ਹੈ।