Индексатсия, robots.txt, canonical, редиректҳо, Core Web Vitals — техникаи сомона ба намоёнӣ чӣ тавр таъсир мерасонад.
Sitemap.xml — файли XML бо рӯйхати URL-ҳое, ки шумо мехоҳед дар ҷустуҷӯ бинед. Он ёфтани саҳифаҳои нав ва амиқ ҷойгиршударо тезонад, аммо индексатсияро кафолат намедиҳад. Ба харита танҳо саҳифаҳои канонӣ бо коди 200 дохил карда мешаванд; маҳдудият — 50 000 URL ё 50 МБ дар як файл. Харитаро дар robots.txt нишон дода, ба Search Console ва Яндекс Вебмастер мефиристанд.
Файл дар решаи сомона қоидаҳои гаштугузорро муайян мекунад: кадом бахшҳоро ботҳо скан накунанд. Муҳим: Disallow гаштугузорро манъ мекунад, на индексатсияро — URL-и пӯшида метавонад бе тавсиф ба натиҷаҳо афтад, агар ба он истинод бошад. Барои аз ҷустуҷӯ хориҷ кардани саҳифа meta robots noindex ҳангоми гаштугузори кушода лозим аст. Барои ҳифзи маълумот robots.txt бефоида аст: ин файли оммавӣ аст ва онро ҳама мебинанд.
Теги rel="canonical" URL-и афзалиятнокро дар байни саҳифаҳои дорои мундариҷаи якхела ё қариб якхела нишон медиҳад: масалан, бо тамғаҳои UTM ё параметрҳои ҷобаҷокунӣ. Ин фармон нест, балки ишора аст — системаи ҷустуҷӯ метавонад URL-и дигарро интихоб кунад. Хатои маъмулӣ — canonical ба саҳифаи мавҷуднабуда ё пӯшида: системаи ҷустуҷӯ версияи асосиро гум карда, метавонад тамоми бахшро аз индекс хориҷ кунад.
Индексатсия — илова кардани саҳифа ба пойгоҳи системаи ҷустуҷӯ, ки пас аз он дар натиҷаҳо нишон дода шуда метавонад. Занҷир: ёфтан (истинодҳо, sitemap) → гаштугузор → рендеринг → баҳодиҳии сифат ва такрорҳо → индекс. Гаштугузор индексатсия нест: ҳолати «Скан шудааст, вале ҳоло индексатсия нашудааст» дар Search Console маънои онро дорад, ки Google саҳифаро дидааст, аммо онро кофӣ арзишнок наҳисобидааст.
Коди 404 маънои «саҳифа ёфт нашуд»-ро дорад. Барои URL-ҳои нестшуда ин ҷавоби муқаррарӣ аст; 410 хабар медиҳад, ки саҳифа абадан нест шудааст ва одатан онро тезтар аз индекс хориҷ мекунанд. Мушкилоти воқеӣ ду аст: «404-и нарм», вақте ки саҳифаи холӣ 200 медиҳад, ва истинодҳои дохилӣ ба URL-ҳои мавҷуднабуда. Агар саҳифаи нестшуда муодил дошта бошад, гузоштани редиректи 301 беҳтар аст.
301 — редиректи доимӣ: он корбарон, ботҳо ва қисми зиёди сигналҳои саҳифаро ба суроғаи нав интиқол медиҳад. Ҳангоми иваз кардани URL, домен, гузаштан ба HTTPS ва якҷоя кардани такрорҳо истифода мешавад. Қоидаҳо: редирект бе занҷир мустақиман ба суроғаи ниҳоӣ, ба саҳифаи мувофиқ (на ҳама ба саҳифаи асосӣ) мебарад ва ақаллан як сол нигоҳ дошта мешавад. 302 — муваққатӣ аст ва барои интиқоли доимӣ мувофиқ нест.
Ин се нишондиҳандаи Google аз рӯи маълумоти воқеии корбарони Chrome мебошад: LCP — боркунии мундариҷаи асосӣ (хуб ≤ 2,5 с), INP — вокуниш ба амалҳо (≤ 200 мс), CLS — устувории визуалӣ (≤ 0,1). Баҳодиҳӣ аз рӯи персентили 75-уми ташрифҳо дар 28 рӯз мегузарад. Ин сигнали рейтинг аст, аммо аз мувофиқат заифтар; ба ивазаш суръат бевосита ба конверсия таъсир мерасонад.
Матлуб аст. Google метавонад JavaScript-ро иҷро кунад, аммо рендеринг ба таъхир меафтад ва захираҳо талаб мекунад, бисёр ботҳои дигар — аз ҷумла краулерҳои системаҳои AI — JavaScript-ро умуман иҷро намекунанд ва танҳо HTML-и аслиро мебинанд. Агар матн, истинодҳо ва нархҳо танҳо пас аз кори скриптҳо пайдо шаванд, баъзе системаҳо онҳоро намебинанд. Додани HTML-и тайёр тавассути SSR ё тавлиди статикӣ боэътимодтар аст.
Аввал манбаъро ёфтан: www ва бе www, слеш дар охир, параметрҳои ҷобаҷокунӣ ва UTM, версияҳои чопӣ, кортҳои якхела. Баъд URL-и асосиро интихоб карда, абзори мувофиқро истифода бурдан: барои такрорҳои техникӣ редиректи 301, барои параметрҳо canonical, барои Яндекс Clean-param дар robots.txt. Истинодҳои дохилӣ ва sitemap бояд танҳо ба версияи асосӣ баранд.
HTTPS маълумотро байни браузер ва сервер рамзгузорӣ мекунад: бе он тамосҳоро аз форма дар шабакаи оммавии Wi-Fi дастрас кардан мумкин аст ва браузерҳо сомонаро ҳамчун «Ҳифзнашуда» қайд мекунанд. Google HTTPS-ро ҳамчун сигнали рейтинг ба ҳисоб мегирад. Ҳангоми гузариш барои ҳамаи URL-ҳо аз HTTP ба HTTPS 301 гузоштан, истинодҳои дохилӣ, canonical ва sitemap-ро навсозӣ кардан ва сарлавҳаи HSTS-ро фаъол кардан муҳим аст.
Ҳеҷ чиз ёфт нашуд.
