જે કંપની હવે વેબનું લાયસન્સ આપી રહી છે, તેને કોઈએ મત આપ્યો નહોતો

Cloudflare એ 1 જુલાઈના રોજ એક નવી પ્રાઇસિંગ સ્ટ્રક્ચર રજૂ કરી છે, જેમાં તેના લાંબા સમયથી ચાલી આવતા “pay-per-crawl” મોડેલને બદલે “pay-per-use” યોજના અપનાવવામાં આવી છે, જે પ્રકાશકોને (publishers) દરેક વખતે જ્યારે કોઈ AI સિસ્ટમ તેમનું કન્ટેન્ટ વાપરે ત્યારે ચૂકવણી કરે છે. આ ફેરફાર સાથે જાહેરાતો ધરાવતા પેજ પર મિશ્ર-ઉપયોગ (mixed-use) કરતા ક્રોલર્સના સ્વચાલિત બ્લોકિંગની પણ શરૂઆત કરવામાં આવી છે, જે 15 સપ્ટેમ્બરથી અમલમાં આવશે. આ ફેરફાર CDN અને સિક્યુરિટી પ્રોવાઈડરને એ બાબતનો 'ડિ-ફેક્ટો ગેટકીપર' (de-facto gatekeeper) બનાવે છે કે કોણ વેબ વાંચી શકે છે અને કઈ શરતો પર, જે AI ટ્રેનિંગના અર્થશાસ્ત્ર અને વ્યાપક ઇન્ટરનેટ ઇકોસિસ્ટમને નવો આકાર આપી શકે છે.

આ પ્રાઇસિંગમાં ફેરફાર શા માટે મહત્વનો છે

જૂની સિસ્ટમ હેઠળ, જે બોટ પેજ મેળવવા માંગતું હતું તેણે Cloudflare ને દરેક રિક્વેસ્ટ દીઠ ફી ચૂકવવી પડતી હતી. આ ફી Cloudflare ને મળતી હતી, સાઇટ માલિકને નહીં. નવું મોડેલ આ પ્રવાહને ઉલટાવે છે: જ્યારે કોઈ AI મોડેલ પેજ એક્સેસ કરે છે, ત્યારે પ્રકાશકને Cloudflare તરફથી ચુકવણી મળે છે. ચુકવણીનો આ ભાગ સારો છે. તે સાઇટ માલિકોને નાણાં આપે છે.

તેનો વ્યવહારિક પ્રભાવ AI ક્રોલર બનાવનાર કોઈપણ વ્યક્તિ પર તરત જ પડશે. જો ક્રોલરને “mixed use” તરીકે વર્ગીકૃત કરવામાં આવે – એટલે કે તે સર્ચ માટે પેજ ઇન્ડેક્સ પણ કરે છે અને ટ્રેનિંગ માટે કન્ટેન્ટ પણ કાઢે છે – તો Cloudflare જાહેરાતો આપતા કોઈપણ પેજ પર તેને ડિફોલ્ટ રીતે બ્લોક કરી દેશે. એક્સેસ મેળવવા માટે, ઓપરેટરે કાં તો Cloudflare ના દર મુજબ ચૂકવણી કરવી પડશે અથવા એ સ્વીકારવું પડશે કે તે પેજ એક્સેસ માટે પ્રતિબંધિત છે.

આ ફેરફાર પાછળનું પોલિસી માળખું

Cloudflare ના પ્રોડક્ટ સ્પેસિફિકેશન AI ક્રોલર્સને ત્રણ ભાગોમાં વહેંચે છે:

  • Search – સર્ચ એન્જિન ચલાવવા માટે પેજ ઇન્ડેક્સ કરતા બોટ્સ.
  • Agent – કન્વર્સેશનલ AI અથવા સમાન એજન્ટ માટે માહિતી મેળવતા બોટ્સ.
  • Training – મશીન-લર્નિંગ મોડેલને ટ્રેન કરવા માટે ટેક્સ્ટ, ઈમેજ અથવા અન્ય ડેટા એકત્રિત કરતા બોટ્સ.

આ વર્ગીકરણ કાયદા અથવા ઉદ્યોગના ધોરણો દ્વારા નક્કી કરવામાં આવતું નથી; Cloudflare ની આંતરિક ટીમ તે નક્કી કરે છે. તે ટીમ દરેક બોટને એક ચોક્કસ કેટેગરીમાં પણ મૂકે છે, ઉદાહરણ તરીકે, શું સંશોધન-લક્ષી ક્રોલર "agent" ગણાય કે "trainer", અથવા શું આર્કાઇવલ બોટ "search" બોટ ગણાય.

આ વર્ગીકરણો સીધી રીતે અસર કરે છે કે બોટ બ્લોક થશે કે નહીં, તેના પર કેટલો ચાર્જ લેવામાં આવશે, અને પ્રકાશકને ચુકવણી મળશે કે નહીં.

કોણ જીતે છે, કોણ હારે છે

પ્રકાશકો (Publishers)

સાઇટ માલિકો હવે આવકનો નવો સ્ત્રોત મેળવે છે. જ્યારે પણ કોઈ AI મોડેલ તેમનો લેખ વાંચે છે, ત્યારે Cloudflare તેમને ચેક મોકલે છે.

AI ડેવલપર્સ

સ્ટાર્ટ-અપ્સ અને રિસર્ચ લેબ્સ જે મોટા અને વૈવિધ્યસભર ડેટાસેટ્સ પર આધાર રાખે છે, તેમને હવે વધારાના ખર્ચનો સામનો કરવો પડશે. જો ક્રોલર Cloudflare ની મંજૂર યાદીમાં ન હોય, તો ડેવલપરે કાં તો 'per-use' ફી ચૂકવવી પડશે અથવા વેબના એક મોટા ભાગના એક્સેસ ગુમાવવા પડશે.

અછત પાછળનું બિઝનેસ લોજિક

Cloudflare નું મોડેલ માર્કેટપ્લેસ ચલાવવા માટે અછત (scarcity) ઊભી કરે છે. ડિફોલ્ટ રીતે, જાહેરાતોથી ભરેલા પેજ પર મિશ્ર-ઉપયોગ કરતા બોટ્સ બ્લોક કરવામાં આવે છે, જેનાથી દરેક રિક્વેસ્ટ એક બિલપાત્ર ઇવેન્ટ બની જાય છે. જો કંપની બધા જ બોટ્સને બ્લોક કરી દેતી, તો તે તેની પોતાની આવકનો સ્ત્રોત જ ખતમ કરી દેતી. તેથી, આ પસંદગીયુક્ત બ્લોકિંગ તેના નફાનું રક્ષણ કરે છે અને બોટ ઓપરેટર્સને પેઇંગ રિલેશનશિપ માટે મજબૂર કરે છે.

આ ફેરફાર Cloudflare ના વિશાળ ફ્રી-ટિયર યુઝર બેઝનો પણ લાભ લે છે. લાખો સાઇટ્સ એટલા માટે જોડાઈ હતી કારણ કે ફ્રી પ્લાન સરળ CDN અને સિક્યુરિટી સેવાઓ આપતો હતો. તે “free” એક્સેસ એ ગ્રાહક મેળવવાની વ્યૂહરચના હતી, કોઈ દાન નહોતું. હવે તે સાઇટ્સ એવા નેટવર્કનો ભાગ છે જે AI જ્યારે તેમનું કન્ટેન્ટ વાપરે છે ત્યારે Cloudflare માટે આવક પેદા કરે છે, પરંતુ કિંમત અથવા પોલિસી કેટેગરી નક્કી કરવામાં સાઇટ્સનો કોઈ કહેવાનો અધિકાર નથી કે કોને ચૂકવણી મળવી જોઈએ.

મુખ્ય વાત (Takeaway)

Cloudflare નું pay-per-use ઓવરહોલ માત્ર આવકની નવી લાઇન ઉમેરવાનું કામ નથી કરતું; તે કંપનીને કયા AI ક્રોલર્સ વેબ વાંચી શકે છે તે લેબલ આપવાની, ચાર્જ લેવાની અને અંતે નિર્ણય લેવાની શક્તિ આપે છે.