настройка robots для ускорения индексации VM

Для того чтобы индексация интернет-магазина на VirtueMart не тормозила и новые товары быстро попадали в индекс ПС надо отдавать ботам 200 ответ по HTTP-статусу, не допустить ошибок при настройке robots.txt и постоянно обновлять в автоматическом режиме sitemap.xml. Кроме этого на скорость индексации влияет интеграция новых страниц (карточек товара) в социальные сети, пинг их и грамотная перелинковка.

Проверяем HTTP-статус

При корректной настройке магазина и чёткой работе сервера на хостинге новые карточки товара автоматом будут отдавать 200 статус HTTP, однако время от времени не будет лишним и проверять коды ответа. Это можно сделать в панели веб-мастера Яндекса во вкладке «индексирование сайта – история – коды HTTP». Подобные возможности есть и у Google.

Отличный от 200 статус может появляться и при кривой настройке движка магазина, в частности ошибках в файле htaccess, и при некорректной работе сервера на хостинге. В первом случае не заворачивайте дело в ящик стола, а воспользуйтесь услугами программиста, во втором, дайте по шее хостеру, убедив его в собственной несостоятельности скринами с панели веб-мастера.

Настройка robots

Тут основные проблемы появляются, когда оптимизатор, имеющий руки, растущее из непотребного места, начинает бороться с дублями VirtueMart и по ходу закрывает от индексации и то, что надо. Выше ссылочка, как настроить robots для VM, к этому лишь добавлю, что проблема не редкая, поэтому не будет лишним прогнать новые страницы, хотя бы частично через аддурл Яндекса дабы посмотреть позволено ли индексировать web-документ.

Также не забывайте после правок файла проверять его корректность в разделе панели веб-мастера «анализ robots.txt».

Бояться правок файла не надо, ибо хрен его знает что хуже – риск допустить ошибку или масса дублирующихся страниц (фото 1), которые ухудшают ранжирование и размазывают статический вес страниц до мизера.

Карта сайта xml

Карта sitemap.xml в идеале должна создаваться движком на автомате, вручную или одной рукой и специальным сервисом переписывать карту для крупного сайта – это несерьёзно. Проверить корректность карты также можно в панели веб-мастера, ниже же я дам пару советов по её созданию.

sitemap для интернет-магазина

  1. - Если адрес карты отличен от сайт.ру/sitemap.xml, то пропишите её адрес внизу robots.txt через директиву «sitemap:»,
  2. - Желательно указать в настройках карты установку приоритета страницам,
  3. - Следите, чтобы на автомате в карте прописывалась дата публикации (изменения) страниц, ведь ранжирование в некоторых нишах имеет временную привязку.

Дополнительными факторами, улучшающими индексацию интернет-магазина на VirtueMart или ином движке считается грамотная перелинковка, структурирование материалов по разделам и удобная и понятная навигация. Они не только упростят работу боту, но создадут удобство для тех, кто пришёл к вам в магазин, как пользователь, но хочет уйти, как покупатель.