Файл Shopify Robots.txt: как найти, отредактировать и скрыть страницы
Опубликовано: 2022-06-27Поисковые системы, такие как Google, просматривают Интернет в поисках новых данных и сканируют веб-страницы с помощью поисковых роботов или поисковых роботов, чтобы найти новый или обновленный контент.
Как владелец магазина Shopify, вы можете использовать файл robots.txt, чтобы запретить поисковым системам сканировать содержимое страницы, которое может снизить SEO вашего сайта за счет кражи PageRank.
Как также указано в руководстве Google по robots.txt, файл robots.txt сообщает поисковым системам, какие страницы или файлы сканеры могут или не могут запрашивать. Однако имейте в виду, что это не гарантирует, что вы не предоставите доступ к веб-странице Google. Позже в этой статье мы рассмотрим, как защитить страницу Shopify от Google.
В этом посте мы объясним, где находится ваш файл Shopify robots.txt, как скрыть страницу от поисковых систем и можно ли ее редактировать. Давайте погрузимся.
Как найти файл Shopify Robots.txt и отправить карту сайта
Ваш файл Shopify robots.txt находится в корневом каталоге основного доменного имени вашего магазина Shopify. Он будет выглядеть как robots.txt с косой чертой доменного имени, как в следующем примере:
examplestore.com/robots.txt
Отправка карты сайта
Если вы считаете, что определенная страница, файл или контент вашего магазина Shopify заблокированы robots.txt, и вы хотите отредактировать его, чтобы Google и другие поисковые системы могли его проиндексировать, подумайте еще раз.
Вам НЕ нужно редактировать файл robots.txt, чтобы Google проиндексировал содержимое вашего веб-сайта.
Вы можете отправить карту сайта в Google, чтобы он знал все о содержании, файлах и обновлениях вашего веб-сайта. Карты сайта генерируются автоматически и находятся в корневом каталоге доменов вашего магазина Shopify. То есть katies-apperal.com/sitemap.xml .
Файл карты сайта Shopify содержит ссылки на все ваши продукты, страницы, сообщения в блогах, изображения продуктов и коллекции. Поисковые системы используют этот файл для индексации вашего сайта, чтобы страницы вашего магазина отображались в результатах поиска.
Для базового плана Shopify: только основной домен вашего магазина имеет сгенерированный файл карты сайта, и его могут обнаружить поисковые системы.
Для расширенного плана Shopify или Shopify Plus: если вы используете международные домены, файлы карты сайта создаются для всех ваших доменов.
Имейте в виду, что поисковым системам может потребоваться некоторое время, чтобы просканировать и проиндексировать ваши веб-страницы. Google не гарантирует, сколько времени займет этот процесс. Вы можете использовать консоль поиска Google, чтобы запросить индексацию каждой страницы вручную или отправить карту сайта вашего магазина.
Вот как отправить карту сайта Shopify в Search Console:
Шаг 1. Перейдите в свою учетную запись Search Console. Нажмите ≡ и выберите Добавить свойство .
Шаг 2. В поле « Выберите тип свойства » выберите « Префикс URL ». Затем введите домен Shopify, который вы хотите добавить в качестве свойства. (Включите часть https:// .)
Шаг 3. Нажмите, чтобы продолжить. Выберите HTML-тег в окне « Подтвердить право собственности ».
Шаг 4. Выделите полный тег HTML и скопируйте его в буфер обмена.
<meta name="google-site-verification" content="IV7BPLESttSpBdxSWN1s4zlr4HIcuHkGQYmE3wLG59w" />
Шаг 5. Перейдите в Shopify Admin > Интернет-магазин > Темы .
Шаг 6. Найдите тему, которую хотите изменить, и нажмите « Действия » , затем « Редактировать код» .
Шаг 7. См. раздел «Макет», найдите и нажмите theme.liquid .
Шаг 8. Вставьте скопированный тег в пустую строку непосредственно под открывающим <head> .
Шаг 9. Сохраните и вернитесь в Search Console , чтобы нажать Подтвердить .
Обратите внимание, что процесс проверки не происходит немедленно. Если вы получили сообщение об ошибке, подождите 15 минут, чтобы снова нажать Подтвердить.
Как редактировать файл Shopify Robots.txt
Если вы спрашиваете: « Могу ли я отредактировать файл Shopify Robots.txt? » ответ - нет . Вы не можете редактировать файл robots.txt, если используете услугу хостинга, такую как Shopify. Shopify автоматически обрабатывает файлы robots.txt для вас, и будьте уверены, они делают это правильно.
Например, Shopify автоматически блокирует отображение страницы вашей корзины в поисковых системах. Это помогает SEO вашего магазина, поскольку позволяет легче находить страницы продуктов в результатах поиска.
Короче говоря, это делается для того, чтобы страницы вашего продукта имели более высокий рейтинг, чем страница оформления заказа.
Как скрыть страницу Shopify от поисковых систем?
Хотя вы не можете редактировать свои файлы Shopify robots.txt, вы можете скрыть страницы, которые не включены в ваш robots.txt. Это возможно путем настройки раздела <head> в файле макета theme.liquid вашего магазина.
1. Откройте страницу администрирования Shopify и перейдите в Интернет-магазин > Темы .
2. Найдите тему, которую хотите отредактировать. Затем нажмите Действия > Изменить код .
3. Щелкните тему.жидкость.
4. Чтобы исключить шаблон поиска, вставьте приведенный ниже код в раздел <head> :
{% if template contains 'search' %}<meta name="robots" content="noindex">{% endif %}
5. Если вы хотите исключить определенную страницу, вставьте приведенный ниже код в раздел <head> :
{% if handle contains 'page-handle-you-want-to-exclude' %}<meta name="robots" content="noindex">{% endif %}
- Не забудьте заменить дескриптор страницы, который вы хотите исключить, на правильный дескриптор страницы.
6. Сохраните изменения.
Источник: Shopify
Для чего используется файл robots.txt?
Основная цель файла robots.txt — управлять трафиком поисковых роботов на вашем сайте и, в зависимости от типа страницы, часто не допускать ее к Google.
Веб-страница: вы можете управлять трафиком веб-страницы с помощью файлов robots.txt, но вы не можете скрыть свои веб-страницы из результатов поиска Google. Он по-прежнему может отображаться в результатах поиска.
Медиафайл. Файл robots.txt может помочь вам управлять трафиком и предотвратить появление изображений, видео и аудио файлов в результатах поиска Google.
Файл ресурсов: файлы robots.txt могут блокировать файлы ресурсов, такие как неважные файлы сценариев, изображений или стилей, и помогать вам управлять трафиком к этим файлам.
Как защитить страницу Shopify от Google?
Если вы хотите, чтобы веб-страница не попала в Google, вам следует использовать директивы noindex или защитить свою страницу паролем.
Знайте ограничения файла robots.txt
- Страница с файлом robots.txt по-прежнему может быть проиндексирована Google, если на нее ссылаются другие сайты.
- Разные поисковые роботы индексируют синтаксис по-разному, и некоторые из них могут не понимать определенные инструкции.
- Искатель должен подчиняться вашим инструкциям robots.txt или нет. Не все поисковые системы поддерживают директивы robots.txt.
Примечание. В любом случае важно протестировать файлы robots.txt вашего магазина Shopify. В этом отношении вы можете использовать Google Robots.txt Tester.
Полезные статьи, которые могут вам понравиться:
- Как создать Shopify Добавить ссылку в корзину
- Shopify Размер изображения коллекции: как изменить размер и оптимизировать ваши изображения
- Как загрузить файл HTML в корень магазина Shopify