Индексиране

Пример

Транспортна фирма пуска нов сайт с 40 страници. След месец отчетът за страниците в Search Console показва 12 индексирани и 28 извън индекса, по три различни причини:

• Изключени с таг noindex — 9 страници. Тагът е останал от тестовата среда, където е стоял нарочно.
• Блокирани от robots.txt — 6 страници. Правило, писано за стария сайт, забранява папка, в която сега стоят услугите.
• Обходени, но неиндексирани — 13 страници. Тук няма техническа пречка. Google е видял страниците и е решил, че не си струват: по три изречения на всяка, при това често едни и същи три изречения.

Първите две се поправят за ден. Третата не се поправя с бутон: тези страници трябва да кажат нещо, което го няма другаде.

Защо има значение за бизнеса

Неиндексираната страница не е на петдесета позиция — тя я няма. Това е и най-евтиният проблем в търсенето, защото причината обикновено е един ред в един файл.

Две подробности си струват. Забраната в robots.txt спира обхождането, но не гарантира, че адресът няма да се появи в Google; а щом страницата е блокирана, никой не може да прочете noindex в нея — двете не се комбинират. И второ, Google обхожда с мобилния си робот, така че това, което липсва в мобилната версия, на практика липсва: мобилната оптимизация и индексирането отдавна не са отделни теми.

Как се подобрява

• Карта на сайта, която изброява само адресите, които искате в индекса, подадена в Search Console.
• Поглед в отчета за страниците след всяко пускане на живо — новите причини за изключване се виждат първо там.
• Един адрес за една страница и каноничен адрес, който сочи към него.
• Достатъчно съдържание на страниците, които държите да бъдат индексирани, и съзнателен noindex на останалите.
• При големи сайтове: по-малко безсмислени адреси от филтри и сортиране, за да не се харчи обхождането по тях.

Какво спира индексирането е първият въпрос в SEO работата, която водим.