যে কোম্পানি এখন ওয়েব লাইসেন্স করছে, তাকে কেউ ভোট দেয়নি

Cloudflare ১ জুলাই একটি নতুন মূল্য নির্ধারণের কাঠামো চালু করেছে, যেখানে তাদের দীর্ঘদিনের "pay-per-crawl" মডেলের পরিবর্তে একটি "pay-per-use" স্কিম চালু করা হয়েছে, যা প্রতিটিবার কোনো AI সিস্টেম কোনো প্রকাশকের কন্টেন্ট ব্যবহার করার সময় তাদের পেমেন্ট প্রদান করে। এই পরিবর্তনের ফলে ১৫ সেপ্টেম্বর থেকে বিজ্ঞাপনযুক্ত পেজগুলোতে স্বয়ংক্রিয়ভাবে মিশ্র-ব্যবহারকারী (mixed-use) ক্রলার ব্লক করার ব্যবস্থা চালু হবে। এই পরিবর্তনটি CDN এবং নিরাপত্তা প্রদানকারী কোম্পানিটিকে কার্যত একজন গেটকিপার বা দ্বাররক্ষক হিসেবে রূপান্তরিত করেছে, যারা নির্ধারণ করবে কে এবং কোন শর্তে ওয়েব পড়তে পারবে; এটি AI প্রশিক্ষণের অর্থনীতি এবং সামগ্রিক ইন্টারনেট ইকোসিস্টেমকে নতুন রূপ দিতে পারে।

কেন এই মূল্য পরিবর্তনের গুরুত্ব রয়েছে

পুরনো পদ্ধতিতে, একটি বট যদি কোনো পেজ সংগ্রহ করতে চাইত, তবে তাকে প্রতি অনুরোধের জন্য Cloudflare-কে একটি ফি দিতে হতো। সেই ফিটি যেত Cloudflare-এর কাছে, সাইট মালিকের কাছে নয়। নতুন মডেলটি সেই প্রবাহকে উল্টে দিয়েছে: যখন কোনো AI মডেল একটি পেজ অ্যাক্সেস করে, তখন প্রকাশক Cloudflare থেকে পেমেন্ট পান। পেমেন্টের এই অংশটি ইতিবাচক। এটি সাইট মালিকদের অর্থ প্রদান করে।

এর বাস্তব প্রভাব সরাসরি AI ক্রলার তৈরি করা ব্যক্তিদের ওপর পড়বে। যদি ক্রলারটিকে "mixed use" হিসেবে শ্রেণীবদ্ধ করা হয়—যার অর্থ এটি সার্চ ইঞ্জিনের জন্য পেজ ইনডেক্স করে এবং প্রশিক্ষণের জন্য কন্টেন্ট সংগ্রহ করে—তবে বিজ্ঞাপনযুক্ত যেকোনো পেজে Cloudflare ডিফল্টভাবে এটিকে ব্লক করে দেবে। অ্যাক্সেস পেতে হলে অপারেটরকে হয় Cloudflare-এর নির্ধারিত রেট অনুযায়ী পেমেন্ট করতে হবে অথবা সেই পেজগুলো ব্যবহারের বাইরে রাখতে হবে।

এই পরিবর্তনের পেছনের নীতিগত কাঠামো

Cloudflare-এর প্রোডাক্ট স্পেসিফিকেশন AI ক্রলারগুলোকে তিনটি ভাগে ভাগ করেছে:

  • Search – বট যা সার্চ ইঞ্জিন চালানোর জন্য পেজ ইনডেক্স করে।
  • Agent – বট যা কনভারসেশনাল AI বা অনুরূপ এজেন্টের জন্য তথ্য সংগ্রহ করে।
  • Training – বট যা মেশিন-লার্নিং মডেল প্রশিক্ষণের জন্য টেক্সট, ছবি বা অন্যান্য ডেটা সংগ্রহ করে।

এই শ্রেণীবিন্যাস কোনো আইন বা শিল্পের মান দ্বারা নির্ধারিত নয়; Cloudflare-এর অভ্যন্তরীণ দল এটি নির্ধারণ করে। সেই দলই প্রতিটি বটকে একটি নির্দিষ্ট ভাগে অন্তর্ভুক্ত করে, উদাহরণস্বরূপ—একটি গবেষণাধর্মী ক্রলার "agent" হিসেবে গণ্য হবে নাকি "trainer" হিসেবে, অথবা একটি আর্কাইভাল বট "search" বট হিসেবে গণ্য হবে কি না।

এই শ্রেণীবিন্যাস সরাসরি প্রভাবিত করে যে একটি বট ব্লক করা হবে কি না, তাকে কত চার্জ করা হবে এবং প্রকাশক পেমেন্ট পাবেন কি না।

কারা লাভবান হচ্ছে এবং কারা ক্ষতিগ্রস্ত হচ্ছে

প্রকাশকরা

সাইট মালিকরা এখন আয়ের একটি নতুন উৎস পাচ্ছেন। প্রতিবার যখন কোনো AI মডেল তাদের নিবন্ধ পড়ে, Cloudflare তাদের একটি পেমেন্ট পাঠায়।

AI ডেভেলপাররা

স্টার্টআপ এবং গবেষণা সংস্থাগুলো যারা বিশাল ও বৈচিত্র্যময় ডেটাসেটের ওপর নির্ভর করে, তাদের এখন অতিরিক্ত খরচের সম্মুখীন হতে হচ্ছে। যদি কোনো ক্রলার Cloudflare-এর অনুমোদিত তালিকায় না থাকে, তবে ডেভেলপারকে হয় প্রতিবার ব্যবহারের জন্য ফি দিতে হবে অথবা ওয়েবের একটি বিশাল অংশ থেকে বঞ্চিত হতে হবে।

দুষ্প্রাপ্যতার পেছনের ব্যবসায়িক যুক্তি

Cloudflare-এর মডেলটি একটি মার্কেটপ্লেস চালানোর জন্য কৃত্রিম দুষ্প্রাপ্যতা তৈরি করে। ডিফল্টভাবে, বিজ্ঞাপনযুক্ত পেজগুলোতে মিশ্র-ব্যবহারকারী বটগুলোকে ব্লক করে দেওয়া হয়, যা প্রতিটি অনুরোধকে একটি বিলযোগ্য ঘটনায় পরিণত করে। কোম্পানিটি যদি সব বট ব্লক করে দিত, তবে তাদের নিজস্ব আয়ের উৎসটিই বন্ধ হয়ে যেত। তাই এই নির্বাচনী ব্লকিং তাদের মুনাফা রক্ষা করে এবং বট অপারেটরদের একটি অর্থপ্রদানকারী সম্পর্কের দিকে ঠেলে দেয়।

এই পরিবর্তনটি Cloudflare-এর বিশাল ফ্রি-টিয়ার ব্যবহারকারী ভিত্তির সুবিধাও গ্রহণ করে। লক্ষ লক্ষ সাইট সাইন আপ করেছিল কারণ তাদের ফ্রি প্ল্যানটি সহজ CDN এবং নিরাপত্তা পরিষেবা প্রদান করত। সেই "ফ্রি" অ্যাক্সেস ছিল গ্রাহক আকর্ষণের একটি কৌশল, কোনো দানশীলতা নয়। এখন সেই সাইটগুলো এমন একটি নেটওয়ার্কের অংশ হয়ে গেছে যা AI তাদের কন্টেন্ট ব্যবহার করার সময় Cloudflare-এর জন্য রাজস্ব তৈরি করে, কিন্তু সাইটগুলোর কাছে মূল্য নির্ধারণ বা নীতিগত বিভাগগুলো সম্পর্কে কোনো মতামত নেই যা নির্ধারণ করে কে পেমেন্ট পাবে।

মূল কথা

Cloudflare-এর এই pay-per-use আমূল পরিবর্তন কেবল একটি নতুন আয়ের খাত যোগ করার চেয়েও বেশি কিছু করে; এটি কোম্পানিটিকে লেবেল করার, চার্জ করার এবং শেষ পর্যন্ত কোন AI ক্রলার ওয়েব পড়তে পারবে তা নির্ধারণ করার ক্ষমতা দেয়।