Urejeshaji wa Bajeti ya Crawl
Google huamua ni URL ngapi itazichunguza (crawl) kwenye tovuti yako. Hii ndiyo bajeti yako ya crawl (crawl budget). Inajumuisha sehemu mbili: uwezo wa crawl (crawl capacity) na mahitaji ya crawl (crawl demand).
Uwezo wa crawl unategemea kasi ya seva yako. Ikiwa seva yako inaitikia haraka, Google itachunguza zaidi.
Mahitaji ya crawl yanategemea maudhui yako. Ikiwa maudhui yako yanabaki kuwa mapya na yenye umaarufu, Google itataka kuyaona mara kwa mara zaidi.
Tovuti nyingi ndogo hazihitaji kuwa na wasiwasi kuhusu hili. Ikiwa una kurasa chini ya 10,000, badala yake zingatia kuwa na sitemap nzuri.
Unahitaji kuchukua hatua tu ikiwa una:
- Zaidi ya kurasa 1 milioni za kipekee.
- Zaidi ya kurasa 10,000 zinazobadilika kila siku.
- URL nyingi zilizokwama kama "Discovered – currently not indexed" kwenye Search Console.
Bajeti ya crawl inayopotea kwa bure kwa kawaida hutokana na matatizo ya kimuundo. Matatizo ya kawaida ni pamoja na:
- Faceted navigation na URL parameters.
- Mnyororo usio na mwisho wa vichujio (filter chains) au kalenda.
- Makosa ya Soft 404.
- Maudhui ya nakala (duplicate) au maudhui hafifu (thin content).
- Minyororo mirefu ya uelekezaji (redirect chains).
- Muda mrefu wa seva kuitikia.
Fuata hatua hizi ili kurekebisha bajeti yako ya crawl:
- Unganisha kurasa zinazojirudia na utumie canonical tags.
- Tumia robots.txt kuzuia URL zisizo na umuhimu. Usitumie noindex kwa ajili ya hili. Google lazima ichunguze ukurasa ili kuona tag ya noindex, jambo ambalo bado linapoteza bajeti.
- Rudisha kodi za hali (status codes) za 404 au 410 kwa kurasa zilizofutwa.
- Sasisha sitemaps zako kwa tarehe sahihi za lastmod.
- Boresha kasi ya seva yako ili kuongeza uwezo.
Baadhi ya wataalamu wanashauri kufuta maudhui yenye ubora mdogo ili kuongeza trafiki. Utafiti mmoja ulionyesha ongezeko la 67% baada ya kufuta machapisho ya zamani yasiyopata trafiki kabisa. Kuwa mwangalifu. Kufuta maudhui kunaboresha ubora na mwelekeo wa tovuti, lakini si mbinu ya uhakika ya ukuaji.
Urejeshaji wa bajeti ya crawl unahusu ufanisi. Unahakikisha Google inapata kurasa zako bora haraka. Haiabadilishi moja kwa moja nafasi zako (rankings).
Fanya ukaguzi (audit) wa tovuti yako kabla ya kufuta kitu chochote. Punguza maudhui kwa ajili ya ubora, si kwa ajili tu ya kufikia idadi fulani.
Chanzo: https://dev.to/mrtd/crawl-budget-reclamation-what-it-is-who-needs-it-and-the-pruning-playbook-139g