Ukaguzi wa katalogi ya vifaa vya viwandani yenye SKU 5,000 ulionyesha kuwa Googlebot ilikuwa inachambua (crawling) URL za vichujio za tovuti mara tatu kwa siku, wakati kurasa kuu za kategoria zilitembelewa mara moja tu kila baada ya wiki tatu. Matokeo yake? Bidhaa mpya zilichukua mwezi mzima kuonekana kwenye matokeo ya utafutaji kwa sababu mchambuzi (crawler) ulikuwa umekwama kwenye URL zisizo na thamani kubwa.

Kwa nini utafutaji wa faceted unadhuru bajeti ya uchambuzi (crawl budget)

Utafutaji wa faceted unawaruhusu wanunuzi kupunguza matokeo kwa kutumia nyenzo, saizi, ufunikaji (coating), na sifa nyinginezo. Kila kipengele (facet) huongeza parameter kwenye URL, na kwa vipimo vitano, mchanganyiko unaowezekana hufikia maelfu ya kurasa za kipekee. Kurasa nyingi kati ya hizo zina orodha ya bidhaa inayofanana تقريباً, lakini Google inazichukulia kila moja kama URL tofauti. Kwa sababu bajeti ya uchambuzi ya Google – idadi ya kurasa itakazochukuliwa kwenye tovuti kila siku – ni ya kiasi fulani, inatumia nafasi muhimu kwenye URL ambazo huongezi thamani kubwa kwa watumiaji au utafutaji.

Muundo wa URL wa tovuti hiyo unamvuta bot kwenye "mtego wa uchambuzi" (crawl trap) ambapo unafuata viungo (links) bila mwisho vinavyoelekeza kwenye kurasa zinazofanana sana.

Hatari iliyopo

  • Kasi ya kuorodhesha (Indexing speed) – kuchelewa kwa ugunduzi kunamaanisha bidhaa mpya zinazopatikana hubaki bila kuonekana kwa wiki kadhaa, jambo linalodhuru mauzo.
  • Uonekanaji kwenye utafutaji (Search visibility) – ikiwa Google itatumia bajeti yake kwenye kurasa za vichujio, kurasa za bidhaa zenye kipaumbele cha juu zinaweza zisichambuliwe kamwe, hivyo kupunguza nafasi zao ya kupata nafasi za juu (rank).

Mwongozo wa hatua kwa hatua wa kurejesha bajeti ya uchambuzi

  1. Tambua vipengele (facets) vyenye thamani kubwa
    Tafuta mchanganyiko wa vichujio unaozalisha trafiki halisi ya utafutaji. Toa URL hizo njia safi na inayoelezeka (kwa mfano, /end-mill/coating-tialn/). Hakikisha kurasa zenye thamani kubwa zinaweza kuchambuliwa na kuorodheshwa kikamilifu.

  2. Tumia lebo za canonical kwa vipengele vya thamani ya kati
    Wakati kichujio ni muhimu lakini hakivuti kiasi kikubwa cha utafutaji, acha URL iweze kufikiwa lakini ongeza rel=canonical inayoelekeza kwenye ukurasa mkuu wa kategoria. Hii inaiambia Google kuwa kategoria ndiyo toleo linalopendekezwa.

  3. Zuia vipengele vya thamani ndogo kupitia robots.txt
    Kataza (Disallow) mifumo hiyo kwenye robots.txt ili Googlebot isiwahi kuziomba.

  4. Wasilisha vichujio vya hali ya juu kama vitufe (buttons), si viungo (links)
    Bot hufuata vipengele vya <a lakini hupuuza vipengele vya <button>. Toa udhibiti wa vichujio kama vitufe vinavyochochea JavaScript bila kuunda URL mpya. Watumiaji bado wanapata muonekano (UI) wanaohitaji, huku mchambuzi (crawler) usipoweza kugundua URL zisizo na faida.

  5. Epuka mtego wa "noindex"
    Kuongeza noindex kwenye URL 30,000 za vichujio bado inamlazimu Google kupakua kila ukurasa kwanza, kisha kusoma agizo la kuupuuza. Tumia robots.txt kuzuia uchambuzi kabisa; ni kurasa tu unazokusudia kuorodhesha zinazopaswa kufikiwa.

Kupima mafanikio

Badilisha mwelekeo kutoka kwenye nafasi (rankings) kwenda kwenye kasi ya kuorodhesha. Fuatilia muda unaochukuliwa kwa bidhaa iliyoongezwa hivi karibuni kuonekana kwenye orodha ya Google kabla na baada ya mabadiliko. Kuhamia kutoka ucheleweshaji wa siku 21 hadi ucheleweshaji wa siku 3 kunaonyesha kuwa mkakati unafanya kazi.

Upande mwingine: uwezo wa kutumia (usability) dhidi ya ufanisi wa uchambuzi

Weka muonekano wa UI ukiwa salama—vitufe bado vinawaruhusu watumiaji kuboresha matokeo—huku ukiweka URL za msingi zisionekane kwa mchambuzi. Ikiwa kichujio fulani kinaonekana kuwa muhimu kwa urambazaji, kiongeze kama kipengele chenye thamani kubwa na ukipeleke URL safi inayoweza kuchambuliwa.

Nini cha kufuatilia baadaye

  • Takwimu za uchambuzi za Search Console – fuatilia ripoti ya “Crawl Stats” kwa upungufu katika “Requests blocked by robots.txt” na ongezeko la “Crawl depth” kwa kurasa za bidhaa.

Muhtasari: Panga vipengele (facets), tumia lebo za canonical, zuia URL zisizo na thamani, na badilisha viungo kuwa vitufe. Tovuti kubwa za e-commerce zinaweza kuelekeza Googlebot kwenye kurasa muhimu, na kupunguza muda wa kuorodhesha kutoka wiki hadi siku bila kuharibu uwezo wa ununuzi wa wateja.