Cloudflare ১ জুলাই তাদের AI-crawler লাইসেন্সিং মডেল চালু করেছে, যেখানে তাদের পুরনো “pay-per-crawl” পদ্ধতির পরিবর্তে “pay-per-use” সিস্টেম চালু করা হয়েছে। এই পদ্ধতিতে একটি কৃত্রিম বুদ্ধিমত্তা (AI) পরিষেবা যখনই কোনো পেজ পড়বে, তখনই চার্জ করা হবে। এই পরিবর্তনটি কেবল দামের সামান্য পরিবর্তন নয়—এটি একটি একক বেসরকারি কোম্পানিকে সিদ্ধান্ত নেওয়ার ক্ষমতা দিচ্ছে যে কে পাবলিক ওয়েব অ্যাক্সেস করতে পারবে এবং কোন শর্তে করতে পারবে।
এই পরিবর্তনের গুরুত্ব কেন
বছরের পর বছর ধরে Cloudflare-এর ফ্রি টিয়ার লক্ষ লক্ষ সাইটকে পারফরম্যান্স বৃদ্ধি করতে এবং অনাকাঙ্ক্ষিত ট্রাফিক ঠেকানোর জন্য একটি সাশ্রয়ী উপায় দিয়ে আসছিল। যখন কোনো বট একটি পেজ সংগ্রহ (fetch) করত, তখন অপারেটরকে প্রতি ক্রলে একটি নির্দিষ্ট ফি দিতে হতো। নতুন মডেলটি সেই সম্পর্কটিকে উল্টে দিচ্ছে: এখন পাবলিশাররা প্রতিবার যখন কোনো AI মডেল তাদের কন্টেন্ট ব্যবহার করবে, তখন তারা পেমেন্ট বা অর্থ প্রাপ্তির সুযোগ পাবে। ওপরের দিক থেকে দেখলে এটি সাইট মালিকদের জন্য একটি বড় জয় বলে মনে হতে পারে, কারণ তারা অবশেষে AI-এর ক্রমবর্ধমান বাজারের একটি অংশ পেতে যাচ্ছে, যা মূলত তাদের কাজের ওপর ভিত্তি করেই গড়ে উঠেছে।
এই মডেলটি AI ক্রলারদের জন্য তিনটি নতুন বিভাগ বা ক্যাটাগরি প্রবর্তন করেছে – Search, Agent, এবং Training – এবং একটি বটকে এই বিভাগগুলোর যেকোনোটিতে অন্তর্ভুক্ত করার ক্ষমতা সরাসরি Cloudflare-এর প্রোডাক্ট স্পেসিফিকেশনের অধীনে রাখা হয়েছে। একটি রিসার্চ বট বৈধ “Agent” নাকি “Training” বট, অথবা একটি ছোট টিমের টুল “Search” পরিষেবা নাকি “লাইসেন্সবিহীন চোর”, তা কোম্পানি নিজেই নির্ধারণ করবে। এই শ্রেণিবিন্যাসগুলো নির্ধারণ করবে কত রেট বা ফি প্রযোজ্য হবে এবং ১৫ সেপ্টেম্বর থেকে, বিজ্ঞাপন প্রদর্শিত হয় এমন পেজগুলোতে বটটিকে সরাসরি ব্লক করা হবে কি না।
নিয়ন্ত্রণের কৌশল
- তিনটি বিভাগ, একজন নিয়ন্ত্রক – Cloudflare একাই এই তিনটি গ্রুপ বা বিভাগ নির্ধারণ করে। এখানে কোনো বাহ্যিক স্ট্যান্ডার্ড বডি, কোনো ইন্ডাস্ট্রি কনসোর্টিয়াম বা জনমত যাচাইয়ের কোনো ব্যবস্থা নেই। একটি বট যদি “Training” বিভাগে পড়ে, তবে তাকে “Search” হিসেবে চিহ্নিত বটের তুলনায় বেশি ফি দিতে হবে, এমনকি যদি তাদের কাজের ধরন প্রায় একই রকম হয় তবুও।
- বিজ্ঞাপন-চালিত পেজগুলোতে ডিফল্ট ব্লকিং – সেপ্টেম্বরের মাঝামাঝি থেকে, বিজ্ঞাপনযুক্ত কোনো পেজে আসা যেকোনো মিশ্র-ব্যবহারকারী (mixed-use) ক্রলারকে অ্যাক্সেস দেওয়া হবে না, যদি না সেটি Cloudflare-এর মানদণ্ড পূরণ করে। এই ব্লকিং প্রক্রিয়াটি স্বয়ংক্রিয়; এটি এড়ানোর একমাত্র উপায় হলো Cloudflare সেই বিভাগের জন্য নির্ধারিত রেট অনুযায়ী পেমেন্ট করা।
- অপেক্ষমাণ তালিকা সম্পন্ন একটি মার্কেটপ্লেস – “লাইসেন্সপ্রাপ্ত” ওয়েব অ্যাক্সেস করার বিষয়টি এখন আর কেবল প্রযুক্তিগত সক্ষমতার ওপর নির্ভর করে না। যেসব কোম্পানি বড় পরিসরে ক্রল করতে চায়, তাদের Cloudflare-এর অনুমোদিত তালিকায় অন্তর্ভুক্ত হওয়ার জন্য আবেদন করতে হবে। যারা তালিকায় স্থান পাবে না, তাদের সামনে দুটি কঠিন পথ খোলা থাকবে: হয় Cloudflare নির্ধারিত দাম মেনে নেওয়া, অথবা ইন্টারনেটের একটি বিশাল অংশ স্ক্র্যাপ করার ক্ষমতা হারানো।
- ভোট ছাড়া আয় – যেসব সাইট মালিক পেমেন্ট পাচ্ছেন, ক্যাটাগরিগুলো কীভাবে তৈরি করা হবে, রেট কীভাবে পরিবর্তিত হবে বা হোয়াইটলিস্টে কারা অন্তর্ভুক্ত হবে, সে বিষয়ে তাদের কোনো মতামত দেওয়ার সুযোগ নেই। মূল্য কাঠামো এবং “গ্রহণযোগ্য” ক্রলিংয়ের সংজ্ঞা একটি কর্পোরেট প্রোডাক্ট স্পেসিফিকেশনের মাধ্যমে নির্ধারিত হয়, কোনো পাবলিক পলিসি প্রক্রিয়ার মাধ্যমে নয়।
কারা লাভবান হচ্ছে, কারা ক্ষতিগ্রস্ত হচ্ছে
পাবলিশাররা – তাৎক্ষণিক সুবিধা হলো আয়ের একটি নতুন উৎস। প্রতিবার যখন একটি AI মডেল কোনো নিবন্ধ পড়ে, সাইট মালিক একটি চেক বা অর্থ প্রাপ্তির সুযোগ পান। যেসব ছোট পাবলিশার ট্রাফিক থেকে আয় করতে হিমশিম খাচ্ছে, তাদের জন্য এই নগদ প্রবাহ অত্যন্ত গুরুত্বপূর্ণ হতে পারে।
AI ডেভেলপার এবং গবেষকরা – যারা Cloudflare-এর নির্ধারিত রেট দিতে সক্ষম এবং হোয়াইটলিস্টে জায়গা নিশ্চিত করতে পারবে, তারা বড় পরিসরে মডেল প্রশিক্ষণ এবং পরিচালনা চালিয়ে যেতে পারবে।
স্টার্টআপ, ওপেন-সোর্স প্রজেক্ট এবং স্বতন্ত্র গবেষকরা – হোয়াইটলিস্টে জায়গা না থাকলে, তাদের হয় Cloudflare নির্ধারিত যেকোনো রেট দিতে হবে অথবা ওয়েবের একটি বিশাল অংশের অ্যাক্সেস হারাতে হবে।
বৃহত্তর ইন্টারনেট ইকোসিস্টেম – পাবলিক ওয়েব অ্যাক্সেসকে একটি লাইসেন্সযোগ্য পরিষেবায় রূপান্তরিত করার মাধ্যমে, Cloudflare এক ধরনের “ডিজিটাল গেটকিপিং” বা নিয়ন্ত্রণ ক্ষমতা কুক্ষিগত করছে, যা ঐতিহ্যগতভাবে একটি শিথিলভাবে নিয়ন্ত্রিত এবং বহু-অংশগ্রহণকারী পরিবেশে থাকা উচিত ছিল।
দুষ্প্রাপ্যতার লুকানো মূল্য
বট ব্লকিংকে দীর্ঘকাল ধরে স্প্যাম, স্ক্র্যাপিং এবং ব্যান্ডউইথ অপব্যবহারের বিরুদ্ধে একটি প্রতিরক্ষামূলক পদক্ষেপ হিসেবে দেখা হতো। Cloudflare-এর নতুন মডেলে এই ব্লকিং হলো তাদের প্রভাব প্রদর্শনের একটি মাধ্যম; আসল পণ্য হলো সেই মিটার যা প্রতিটি পেজ ভিউ পরিমাপ করে এবং তার সাথে একটি মূল্য নির্ধারণ করে দেয়। কোম্পানিটি এক নিমেষেই এমন একটি ব্যবস্থা চালু করতে পারে যা সবার জন্য দুষ্প্রাপ্যতা তৈরি করবে, কারণ তারা নিজেই সেই মার্কেটপ্লেস পরিচালনা করছে যা এই অ্যাক্সেস বিক্রি করে।
আজকের বেশিরভাগ ওয়েব ট্রাফিককে আকৃষ্ট করার জন্য যে ফ্রি টিয়ারটি ব্যবহার করা হয়েছিল, তা কখনোই দান ছিল না। এটি ছিল একটি কৌশলগত প্রবেশপথ যা Cloudflare-কে বাজারে আধিপত্য বিস্তার করতে সাহায্য করেছিল, যাতে পরবর্তীতে তারা এই লাইসেন্সিং মডেলের মাধ্যমে সেই আধিপত্য থেকে অর্থ উপার্জন করতে পারে। এখন সেই একই অবকাঠামো, যা একসময় দ্রুত পেজ লোড করার প্রক্রিয়াকে সহজলভ্য করেছিল, সেটিই এখন সিদ্ধান্ত নিচ্ছে যে কারা সেই পেজগুলো পড়তে পারবে।
পাল্টা যুক্তি: AI-কে জ্বালানি যোগানো কন্টেন্টের জন্য পেমেন্ট করা
নতুন সিস্টেমের পক্ষে যুক্তিটি সহজ: এআই ডেভেলপাররা নির্মাতাদের কোনো ক্ষতিপূরণ না দিয়েই জনসমক্ষে উপলব্ধ টেক্সট, ছবি এবং কোড থেকে মুনাফা অর্জন করে আসছে। Cloudflare-এর মডেলটি একটি পেমেন্ট লুপ বা অর্থপ্রদানের চক্র তৈরি করে যা উচ্চমানের কন্টেন্ট তৈরিতে উৎসাহ দিতে পারে এবং পাবলিশারদের এআই অর্থনীতিতে অংশীদারিত্ব প্রদান করতে পারে। এটি ক্ষতিকারক নয় এমন সার্চ বট এবং ব্যাপক ডেটা-হার্ভেস্টিং কার্যক্রমের মধ্যে পার্থক্য করার জন্য একটি স্পষ্ট ও কার্যকর উপায় প্রদান করে, যা সম্ভাব্য অপব্যবহার রোধ করতে পারে।
তবে, এই সুবিধাগুলো এই সত্যকে মুছে দেয় না যে নিয়মগুলো একতরফাভাবে নির্ধারণ করা হয়েছে। এমনকি আয়ের অংশ যদি উদারও হয়, তবুও একটি গণতান্ত্রিক প্রক্রিয়ার অভাবের অর্থ হলো—যদি বিভাগগুলো খামখেয়ালি প্রমাণিত হয় বা রেটগুলো শোষণমূলক হয়ে ওঠে, তবে জনসাধারণের কাছে কোনো প্রতিকার থাকবে না। এই মডেলটি এক সেট অস্বচ্ছ সিদ্ধান্তের (অ্যাড-ব্লকিং হিউরিস্টিকস) পরিবর্তে অন্য একটি সেটকে স্থান দিচ্ছে, যা আর্থিকভাবে আরও বেশি প্রভাব বিস্তারকারী।
পরবর্তীতে যা লক্ষ্য রাখতে হবে
মূল কথা
Cloudflare-এর ১লা জুলাইয়ের মূল্য নির্ধারণের আমূল পরিবর্তন একটি ওয়েব পেজ পড়ার কাজটিকে একটি লাইসেন্সযোগ্য লেনদেনে পরিণত করেছে, যেখানে একটি একক বেসরকারি কোম্পানি নিয়ম তৈরি করছে এবং ফি সংগ্রহ করছে। যদিও পাবলিশাররা অবশেষে এআই-চালিত ব্যবহারের মাধ্যমে অর্থ উপার্জন করতে পারছেন, তবে এর বৃহত্তর পরিণতি হলো ডিজিটাল গেটকিপিংয়ের একটি নতুন রূপ, যা নির্ধারণ করে দেবে কারা এবং কোন শর্তে পাবলিক ইন্টারনেট ব্যবহার করতে পারবে। আসল বিষয়টি দামের নয়; আসল বিষয়টি হলো এমন একটি ক্ষেত্রে নিয়ন্ত্রণের কেন্দ্রীভূত হওয়া যা দীর্ঘকাল ধরে উন্মুক্ত বলে বিবেচিত হয়ে আসছে।