AI ಕಂಪನಿಗಳು ಪ್ರಕಾಶಕರಿಗೆ ಪಾವತಿಸುವಂತೆ ಮಾಡಲು Cloudflare ಗಡುವು ನಿಗದಿಪಡಿಸಿದೆ

ಸಾಂಪ್ರದಾಯಿಕ ಸರ್ಚ್ ಕ್ರಾಲिंग ಅನ್ನು AI ತರಬೇತಿ ಮತ್ತು ಏಜೆಂಟಿಕ್ ಸೇವೆಗಳಿಂದ ಬೇರ್ಪಡಿಸಲು ವಿನ್ಯಾಸಗೊಳಿಸಲಾದ ಒಂದು ಐತಿಹಾಸಿಕ ನೀತಿ ಬದಲಾವಣೆಯನ್ನು Cloudflare ಘೋಷಿಸಿದೆ. ಕಟ್ಟುನಿಟ್ಟಾದ ಹೊಸ ಡಿಫಾಲ್ಟ್ ನಿಯಮಗಳನ್ನು ಜಾರಿಗೆ ತರುವ ಮೂಲಕ, ಈ ಎಡ್ಜ್ ಕಂಪ್ಯೂಟಿಂಗ್ ದೈತ್ಯ ಸಂಸ್ಥೆಯು ಬೌದ್ಧಿಕ ಆಸ್ತಿಯನ್ನು ರಕ್ಷಿಸುವ ಮತ್ತು ವೆಬ್ ಪ್ರಕಾಶಕರಿಗಾಗಿ ಸುಸ್ಥಿರ ಆರ್ಥಿಕ ಪರಿಸರ ವ್ಯವಸ್ಥೆಯನ್ನು ನಿರ್ಮಿಸುವ ಗುರಿಯನ್ನು ಹೊಂದಿದೆ.

"ಮಿಕ್ಸ್ಡ್-ಬಳಕೆಯ" (Mixed-Use) ಕ್ರಾಲರ್‌ಗಳ ಅಂತ್ಯ

ಪ್ರಸ್ತುತ ಇರುವ ಡೇಟಾ-ಸ್ಕ್ರ್ಯಾಪಿಂಗ್ ಸ್ಥಿತಿಗತಿಗಳಿಗೆ ನೇರವಾಗಿ ಸವಾಲು ಹಾಕುವ ಕ್ರಮವಾಗಿ, "ಮಿಕ್ಸ್ಡ್-ಬಳಕೆಯ" ಕ್ರಾಲರ್‌ಗಳ ಹೆಚ್ಚಳವನ್ನು ಎದುರಿಸಲು Cloudflare ಸೆಪ್ಟೆಂಬರ್ 15, 2026 ರ ಗಡುವನ್ನು ನಿಗದಿಪಡಿಸಿದೆ. ಇವು ಸಾಂಪ್ರದಾಯಿಕ ಸರ್ಚ್ ಇಂಡೆಕ್ಸಿಂಗ್ ಅನ್ನು AI ಮಾಡೆಲ್ ತರಬೇತಿ ಮತ್ತು ಏಜೆಂಟಿಕ್ ಕಾರ್ಯಗಳೊಂದಿಗೆ ಬೆರೆಸುವ ಬಾಟ್‌ಗಳಾಗಿವೆ. ಆ ದಿನಾಂಕದಿಂದ, Cloudflare ನ ಡಿಫಾಲ್ಟ್ ಸೆಟ್ಟಿಂಗ್‌ಗಳು ಜಾಹೀರಾತುಗಳನ್ನು ಹೊಂದಿರುವ ಯಾವುದೇ ಪುಟಗಳನ್ನು ಪ್ರವೇಶಿಸದಂತೆ ಈ ಹೈಬ್ರಿಡ್ ಕ್ರಾಲರ್‌ಗಳನ್ನು ಸ್ವಯಂಚಾಲಿತವಾಗಿ ನಿರ್ಬಂಧಿಸುತ್ತವೆ.

ಈ ನೀತಿ ಬದಲಾವಣೆಯು ಎಲ್ಲಾ ಹೊಸ Cloudflare ಗ್ರಾಹಕರಿಗೆ, ಅಸ್ತಿತ್ವದಲ್ಲಿರುವ ಗ್ರಾಹಕರು ರಚಿಸುವ ಹೊಸ ಸೈಟ್‌ಗಳಿಗೆ ಮತ್ತು ಎಲ್ಲಾ ಪ್ರಸ್ತುತ ಉಚಿತ-ಹಂತದ (free-tier) ಬಳಕೆದಾರರಿಗೆ ಅನ್ವಯಿಸುತ್ತದೆ. AI ಕಂಪನಿಗಳು ತಮ್ಮ ಉದ್ದೇಶವನ್ನು ಸ್ಪಷ್ಟಪಡಿಸುವಂತೆ ಮಾಡುವುದು ಇದರ ಗುರಿಯಾಗಿದೆ: ಒಂದು ಬಾಟ್ ಸರ್ಚ್‌ಗಾಗಿ ಸೈಟ್ ಅನ್ನು ಇಂಡೆಕ್ಸ್ ಮಾಡಲು ಬಯಸಿದರೆ, ಅದು ಒಂದು ಹಾದಿಯನ್ನು ಅನುಸರಿಸುತ್ತದೆ; ಒಂದು ವೇಳೆ ಅದು Large Language Model (LLM) ತರಬೇತಿಗಾಗಿ ಡೇಟಾವನ್ನು ಬಳಸಲು ಬಯಸಿದರೆ, ಅದು ಮತ್ತೊಂದು ಹಾದಿಯನ್ನು ಅನುಸರಿಸಬೇಕು—ಅದು ಸಂಭಾವನೆಯನ್ನು (compensation) ಕೇಳುವ ಸಾಧ್ಯತೆಯನ್ನು ಹೊಂದಿದೆ.

ಸರ್ಚ್ ದೈತ್ಯರ ಪ್ರಾಬಲ್ಯಕ್ಕೆ ಸವಾಲು

ಪ್ರಮುಖ ಸರ್ಚ್ ಇಂಜಿನ್‌ಗಳು ಹೊಂದಿರುವ ಅನ್ಯಾಯದ ಅನುಕೂಲವು ಈ ನಿರ್ಧಾರದ ಹಿಂದಿನ ಪ್ರಮುಖ ಕಾರಣವಾಗಿದೆ. ಪ್ರಪಂಚದ ಅತಿದೊಡ್ಡ ಸರ್ಚ್ ಇಂಜಿನ್—ಅದು ಗೂಗಲ್ (Google) ಎಂದು ವ್ಯಾಪಕವಾಗಿ ತಿಳಿದಿದೆ—ತನ್ನ AI ಸ್ಪರ್ಧಿಗಳಿಗಿಂತ ಸರಿಸುಮಾರು "2 ಪಟ್ಟು ಹೆಚ್ಚು ಮಾಹಿತಿ"ಯನ್ನು ಪ್ರಸ್ತುತ ಹೊಂದಿದೆ ಎಂದು Cloudflare ನಿರ್ದಿಷ್ಟವಾಗಿ ಎತ್ತಿ ತೋರಿಸಿದೆ.

ಸರ್ಚ್ ದೃಶ್ಯತೆಯನ್ನು (search visibility) ಬಾಧಿಸದೆ ಪ್ರಕಾಶಕರು AI ತರಬೇತಿಯಿಂದ ಹೊರಗುಳಿಯಲು Google "Google Extended" ಅನ್ನು ನೀಡಿದ್ದರೂ, ಅದರ ಪ್ರಮುಖ Googlebot ಎಂಬುದು AI Overviews ನಂತಹ ವೈಶಿಷ್ಟ್ಯಗಳಿಗೆ ಶಕ್ತಿ ತುಂಬಲು ವ್ಯಾಪಕವಾಗಿ ಕ್ರಾಲ ಮಾಡುವುದನ್ನು ಮುಂದುವರಿಸಿದೆ. AI ಕಂಪನಿಗಳು ತಮ್ಮ ಮಾಡೆಲ್‌ಗಳನ್ನು ಉಚಿತವಾಗಿ ತರಬೇತಿಗೊಳಿಸಲು ಸರ್ಚ್ ಇಂಜಿನ್‌ಗಳ ಬೃಹತ್ ಇಂಡೆಕ್ಸಿಂಗ್ ಸಾಮರ್ಥ್ಯಗಳನ್ನು ಬಳಸಿಕೊಳ್ಳದಂತೆ ತಡೆಯಲು ಮತ್ತು ಎಲ್ಲರಿಗೂ ಸಮಾನ ಅವಕಾಶವನ್ನು ಒದಗಿಸಲು Cloudflare ನ ಮಧ್ಯಸ್ಥಿಕೆ ಪ್ರಯತ್ನಿಸುತ್ತಿದೆ.

"Pay Per Use" ಮಾದರಿಗಳತ್ತ ಸಾಗುವಿಕೆ

ಕೇವಲ ನಿರ್ಬಂಧಿಸುವುದನ್ನು ಮೀರಿ, Cloudflare ಹೊಸ ಕಂಟೆಂಟ್ ಎಕಾನಮಿಗಾಗಿ ಮೂಲಸೌಕರ್ಯವನ್ನು ಸಕ್ರಿಯವಾಗಿ ನಿರ್ಮಿಸುತ್ತಿದೆ. ಕಂಪನಿಯು ತನ್ನ "Pay Per Crawl" ಮಾರುಕಟ್ಟೆಯನ್ನು ಹೆಚ್ಚು ಸುಧಾರಿತವಾದ "Pay Per Use" ಮಾದರಿಯಾಗಿ ಪರಿವರ್ತಿಸುತ್ತಿದೆ. ಈ ಚೌಕಟ್ಟಿನ ಅಡಿಯಲ್ಲಿ, ಪ್ರಕಾಶಕರು ಕೇವಲ ಡೇಟಾವನ್ನು ಪಡೆಯುವಿಕೆಗಾಗಿ ಮಾತ್ರವಲ್ಲದೆ, ಆ ಕಂಟೆಂಟ್ ವಾಸ್ತವವಾಗಿ ಮೌಲ್ಯವನ್ನು ಸೃಷ್ಟಿಸಿದಾಗ AI ಕಂಪನಿಗಳಿಂದ ಶುಲ್ಕವನ್ನು ವಸೂಲಿ ಮಾಡಬಹುದು.

ಇದನ್ನು ಪೈಲಟ್ ಮಾಡಲು, Cloudflare ಸಂಸ್ಥೆಯು Ceramic.ai ಮತ್ತು You.com ನೊಂದಿಗೆ ಪಾಲುದಾರಿಕೆಯನ್ನು ಹೊಂದಿದೆ. ಈ ಪಾಲುದಾರಿಕೆಗಳ ಮೂಲಕ, ಪ್ರಕಾಶಕರ ಕಂಟೆಂಟ್ Ceramic ನ AI ಸರ್ಚ್ ಫಲಿತಾಂಶಗಳಲ್ಲಿ ಕಾಣಿಸಿಕೊಂಡಾಗ ಅಥವಾ You.com ಪ್ರೀಮಿಯಂ ಮಾಹಿತಿಯನ್ನು ಪ್ರವೇಶಿಸಿದಾಗ ಅವರು ನೇರ ಸಂಭಾವನೆಯನ್ನು ಪಡೆಯಬಹುದು. ಈ ಬದಲಾವಣೆಯು ಪ್ರಸ್ತುತ ವೆಬ್‌ನಲ್ಲಿರುವ ಒಂದು ಪ್ರಮುಖ ಅಸಮರ್ಥತೆಯನ್ನು ಪರಿಹರಿಸುತ್ತದೆ: AI ಕ್ರಾಲರ್ ಟ್ರಾಫಿಕ್‌ನಲ್ಲಿ ಶೇಕಡಾ 50 ಕ್ಕೂ ಹೆಚ್ಚು ಭಾಗವು ಬದಲಾಗದ ಪುಟಗಳನ್ನು ಮತ್ತೆ ಮತ್ತೆ ಪಡೆಯುವಿಕೆಯಲ್ಲಿ ವ್ಯರ್ಥವಾಗುತ್ತಿದೆ ಎಂದು Cloudflare ಡೇಟಾ ಬಹಿರಂಗಪಡಿಸಿದೆ, ಇದು ಪ್ರಕಾಶಕರ ಬ್ಯಾಂಡ್‌ವಿಡ್ತ್ ಮತ್ತು AI ಕಂಪ್ಯೂಟ್ ಸಂಪನ್ಮೂಲಗಳೆರಡನ್ನೂ ವ್ಯಯಿಸುತ್ತದೆ.

AI ವಲಯಕ್ಕೆ ಇದು ಏಕೆ ಮುಖ್ಯ

ಇಂಟರ್ನೆಟ್‌ನಲ್ಲಿ ಮಾನವವಲ್ಲದ ಟ್ರಾಫಿಕ್ ಈಗ ಮಾನವ ಟ್ರಾಫಿಕ್ ಅನ್ನು ಮೀರಿಸುತ್ತಿರುವುದರಿಂದ, "ಎಲ್ಲವನ್ನೂ ಉಚಿತವಾಗಿ ಸ್ಕ್ರ್ಯಾಪ್ ಮಾಡುವುದು" ಎಂಬ ಯುಗವು ಅಂತ್ಯಗೊಳ್ಳುತ್ತಿದೆ. Cloudflare ನ ಈ ಕ್ರಮವು ಹೆಚ್ಚು ನಿಯಂತ್ರಿತ ಮತ್ತು ವಹಿವಾಟು ಆಧಾರಿತ ವೆಬ್‌ನತ್ತ ಬದಲಾವಣೆಯ ಸಂಕೇತವಾಗಿದೆ. AI ಡೆವಲಪರ್‌ಗಳಿಗೆ, ಇದರರ್ಥ ಅಡೆತಡೆಯಿಲ್ಲದ, ಶೂನ್ಯ ವೆಚ್ಚದ ಡೇಟಾ ಸ್ವಾಧೀನದ ಯುಗವು ಮುಕ್ತಾಯವಾಗುತ್ತಿದೆ; ದೀರ್ಘಕಾಲದ ಡೇಟಾ ಲಭ್ಯತೆಯನ್ನು ಖಚಿತಪಡಿಸಿಕೊಳ್ಳಲು ಕಂಟೆಂಟ್ ಕ್ರಿಯೇಟರ್‌ಗಳೊಂದಿಗೆ ಹೆಚ್ಚು ಪಾರದರ್ಶಕ ಮತ್ತು ಸಹಕಾರದ ಸಂಬಂಧಗಳನ್ನು ಹೊಂದುವುದು ಅನಿವಾರ್ಯವಾಗಲಿದೆ.

ಪ್ರಮುಖ ಅಂಶಗಳು

• ಡಿಫಾಲ್ಟ್ ಬ್ಲಾಕಿಂಗ್: ಸೆಪ್ಟೆಂಬರ್ 15, 2026 ರಿಂದ, Cloudflare ಜಾಹೀರಾತು ಆಧಾರಿತ ಪುಟಗಳಿಂದ "ಮಿಕ್ಸ್ಡ್-ಬಳಕೆಯ" ಕ್ರಾಲರ್‌ಗಳನ್ನು ಡಿಫಾಲ್ಟ್ ಆಗಿ ನಿರ್ಬಂಧಿಸುತ್ತದೆ.
• ಮಾನಿಟೈಸೇಶನ್ ಬದಲಾವಣೆ: Cloudflare "Pay Per Crawl" ನಿಂದ "Pay Per Use" ಮಾದರಿಗೆ ಬದಲಾಗುತ್ತಿದೆ, ಇದು ಪ್ರಕಾಶಕರು ಕಂಟೆಂಟ್ ಮೌಲ್ಯದ ಆಧಾರದ ಮೇಲೆ AI ಕಂಪನಿಗಳಿಂದ ಶುಲ್ಕ ವಸೂಲಿ ಮಾಡಲು ಅನುಮತಿಸುತ್ತದೆ.
• ದಕ್ಷತೆಯ ಹೆಚ್ಚಳ: ಹೊಸ ನೀತಿಯು ಪ್ರಸ್ತುತ ಬದಲಾಗದ ವೆಬ್ ಪುಟಗಳನ್ನು ಮತ್ತೆ ಪಡೆಯುವಿಕೆಯಲ್ಲಿ ವ್ಯರ್ಥವಾಗುತ್ತಿರುವ ಶೇಕಡಾ 50 ರಷ್ಟು AI ಕ್ರಾಲ ಟ್ರಾಫಿಕ್ ಅನ್ನು ಕಡಿಮೆ ಮಾಡುವ ಗುರಿಯನ್ನು ಹೊಂದಿದೆ.