Содержание:

1. Неправильно организована страница “ошибка 404”
2. Проблемы, связанные с переносом веб-сайта на новую CMS или изменение дизайна
3. Низкая скорость загрузки сайта
4. Нет мобильной или адаптивной версии  сайта
5. Проблемы с URL-структурой
6. Проблемы с файлом robots.txt
7. Слишком много не информативного контента
8. Низкая релевантность контента
9. Злоупотребление canonical тегом или неправильное его использование
10. Неправильное использование метатегов robots
11. Не правильно расходуется краулинговый бюджет
12. Не используются внутренние ссылки для передачи веса и повышения релевантности
13. Ошибки  использования метатегов
14. Структурированные данные

1. Неправильно организована страница “ошибка 404”

Однако страницы 404 могут быть проблемой, когда:

• Они получают трафик (внутренний и из органического поиска).
• Есть внешние ссылки, которые указывают на них.
• Есть внутренние ссылки, которые указывают на них.
• Существует большое количество таких страниц на более большом веб-сайте.
• Есть ссылки на них в социальных медиа и Интернете.

Как найти эти ошибки

• Запустите парсинг сайта ( Screaming Frog, Netpeak Spider, Xenu или используя другой похожий софт), чтобы найти все страницы 404.
• Проверьте отчеты консоли Google Search (Сканирование> Ошибки сканирования).

Как исправить эти ошибки

• Проанализируйте список ошибок ”404″ на вашем сайте.
• Перепроверьте эти URL-адреса с помощью Google Analytics, чтобы понять, какие страницы получают трафик.
• Перепроверьте эти URL-адреса с помощью Google Search Console, чтобы понять, какие страницы имеют входящие ссылки с внешних веб-сайтов.
• Для тех страниц, которые имеют значение, определите существующую страницу на вашем веб-сайте, которая наиболее актуальна для удаленной страницы.
• Настройте редиректы 301 со страницы 404 на существующую страницу, которую вы определили.
• Для автоматизации процесса можно сделать 301 редирект на родительскую категории, если товар удален и, если в админке вручную не задан редирект на другую страницу, чтобы в дальнейшем, если вы не указали куда редиректить, страница автоматически редиректилась бы на категорию.

2. Проблемы, связанные с переносом веб-сайта на новую CMS или изменение дизайна

Общие ошибки, которые мы чаще всего видим:

• Использование 302 (временное перенаправление) вместо 301 (постоянное перенаправление). Хотя представители Google заявили, что перенаправления 302 проходят SEO-эквити, мы делаем выводы на основе внутренних данных, которые показывают, что перенаправления 301 являются лучшим вариантом.
• Неправильная настройка HTTPS на веб-сайте. В частности, не все страницы перенаправляются HTTP-версии сайта в HTTPS, что может вызвать проблемы с дублирующимися страницами.
• Не переносить 301 редирект с предыдущего сайта на новый сайт. Это часто случается, если вы используете плагин для редиректа, который теряется после переезда на новый движок.
• Оставляя устаревшие теги на сайте из тестового домена (домена на котором ведется разработка сайта). Например, канонические теги, теги noindex и т. д., которые препятствуют индексированию страниц на основном домене.
• Оставляя тестовые домены индексированными. Противоположность предыдущему пункту, когда вы не размещаете правильные теги на тестовых доменах или поддоменах. Не делаются метатеги Noindex, Nofollow или запрет через файл robots.txt.
• Создание «длинных цепочек перенаправления» при очистке устаревших веб-сайтов. Другими словами, на старом сайте есть редирект на новые страницы, а с этих страниц на страницы нового сайта, и получается цепочки редиректов в 3 и больше уровней.
• Не делая редиректы с www на без wwww или наоборот в файле htaccess. Это приводит к индексированию 2 (или более) экземпляров вашего веб-сайта в Google, что вызывает проблемы с индексированием из-за дубликатов страниц.

Как найти эти ошибки

• Выполните полный парсинг веб-сайта (Screaming Frog, Netpeak Spider, Xenu), чтобы получить необходимые данные.

Как исправить эти ошибки

• Проверьте свои 301 и 302 перенаправления, чтобы убедиться, что они идут в нужное место на первом шаге.
• Проверьте канонические теги таким же образом и убедитесь, что у вас есть правильные канонические теги.
• Учитывая выбор между канонизацией страницы и перенаправлением страницы 301-перенаправление 301 является более безопасным и сильным вариантом.
• Проверьте код, чтобы убедиться, что вы удалили теги NOINDEX, NOFOLLOW (если они используются на тестовом домене). Не просто снимите опции плагинов. Ваш сайт может иметь встроенные NOINDEX, NOFOLLOW в заголовке темы. В WordPress, например: Внешний вид> Темы> Редактор> header.php
• Обновляйте свой robots.txt-файл
• Проверьте и обновите свой файл .htaccess

3. Низкая скорость загрузки сайта

Оптимизация для скорости веб-сайта потребует помощи разработчика, поскольку наиболее распространенными проблемами, замедляющими веб-сайты, являются:

• Большие неоптимизированные изображения.
• Плохо написанный (раздутый) код сайта.
• Слишком много плагинов.
• Тяжелый Javascript и CSS.

Как найти эти ошибки

• Проверьте свой сайт в Google Pagespeed Insights, GTMetrix или Pingdom

Как исправить эти ошибки

• Наймите разработчика с опытом работы в этой области.
• Делайте все на тестовом, чтобы не пострадал основной сайт.
• Где это возможно, убедитесь, что вы обновили PHP до PHP7, там, где вы используете WordPress или PHP CMS. Это будет иметь влияние на скорость.

4.Нет мобильной или адаптивной версии сайта

Как найти эти ошибки

• Используйте тест Google для мобильных устройств, чтобы проверить, видит ли Google ваш сайт как мобильный.
• Убедитесь, что «смартфон Googlebot» сканирует ваш сайт — он пока не развернулся повсюду в Google Search Console (GSC).
• Работает ли ваш сайт на разных устройствах? Если ваш сайт не работает на мобильном устройстве, настало время исправить это.

Как исправить эти ошибки

• Понять влияние мобильных устройств на загрузку вашего сервера.
• Сосредоточьтесь на создании страниц, с точки зрения мобильных устройств. Google любит адаптивные сайты.
• Если вам нужно, рассмотрите обновление шаблона, чтобы сделать тему адаптивной. Просто использование плагина может не делать то, что вам нужно, или вызывать другие проблемы. Найдите разработчика, который может создавать адаптивные темы.
• По-прежнему очень важно сосредоточиться на нескольких мобильных контрольных точках, а не только на новом iPhone X. 320px wide (iPhone 5 и SE).
• Сделайте тестирование на iPhone и Android.
• Если у вас есть контент, для которого требуется «установка» — флеш или других проприетарных систем, которые не работают в вашей мобильной версии, — подумайте о переходе на HTML5, который будет отображаться на мобильных устройствах.

Проблемы XML Sitemap
В XML-Sitemap перечислены URL-адреса вашего сайта, которые вы хотите обходить и индексировать поисковыми системами.
Вам разрешено включать информацию о том, когда страница:

• Последний раз была обновлена.
• Как часто она меняется.
• Насколько это важно в отношении других URL-адресов на сайте (то есть, приоритет).

Файлы sitemap особенно полезны на сайтах, где:

• Некоторые области веб-сайта недоступны через просматриваемый интерфейс.
• Веб-мастера используют богатый контент Ajax, Silverlight или Flash, который обычно не обрабатывается поисковыми системами.
• Сайт очень большой, и есть вероятность, что веб-сканеры смогут пропустить некоторые из новых или недавно обновленных материалов.
• Когда на веб-сайтах имеется огромное количество страниц, которые изолированы или плохо связаны друг с другом.
• Неправильный «расход краулингового бюджета» на неважных страницах. Когда робот проходит не те страницы, которые нужно. Если это так, вам нужно заблокировать сканирование или подумать каким образом предлагать поисковому роботу нужные ссылки.

Как найти эти ошибки

• Убедитесь, что вы отправили файл sitemap на GSC.
• Проверить файл sitemap на ошибки сканирования > файлы > ошибки сайта.
• Проверьте файлы журнала, чтобы узнать, когда ваш файл sitemap последний раз был доступен ботам.

Как исправить эти ошибки

• Убедитесь, что карта сайта XML подключена к консоли поиска Google.
• Запустите анализ журнала сервера, чтобы понять, как часто Google просматривает файл sitemap.
• Google покажет вам вопросы и примеры того, что он видит, как ошибку, так что вы сможете исправить ее.
• Если вы используете плагин для генерации Sitemap, убедитесь, что он в актуальном состоянии и что файл, который он создает, работает посредством его подтверждения.
• Если вы не хотите использовать Excel для проверки журналов сервера, вы можете использовать средство анализа логов сервера, такое как Logz.io, Greylog, SEOlyzer (отлично подходит для сайтов WP) или Loggly, чтобы узнать, как используется ваша карта сайта XML.

5. Проблемы с URL-структурой

• Не использовать правильную структуру папок и подпапок.
• URL-адреса со специальными символами, заглавные буквы или неполезные для людей.

Как найти эти ошибки

• Ошибка 404, перенаправление 302, проблемы с вашей картой XML — все это признаки сайта, который нуждается в пересмотре его структуры.
• Выполните полный обход веб-сайта (Screaming Frog, Netpeak Spider) и вручную просмотрите проблемы качества.
• Проверьте отчеты консоли Google Search (Сканирование > Ошибки сканирования).
• Тестирование пользователей — попросите людей найти контент на вашем сайте или сделать тестовую покупку.

Как исправить эти ошибки

• Планируйте иерархии сайтов — мы всегда рекомендуем создавать “плоскую” структуру, как можно меньше кликов от главной.
• Убедитесь, что все содержимое размещено в правильной папке или вложенной папке.
• Убедитесь, что ваши URL-адреса легко читаются и имеют смысл.
• Удалите или консолидируйте любой контент, который рассчитан на ранжирование одного и того же ключевого слова.
• Попытайтесь ограничить количество подпапок / каталогов не более чем тремя уровнями.

6.Проблемы с файлом robots.txt

Как найти эти ошибки

• Проверьте статистику вашего сайта — то есть Google Analytics для больших падений трафика.
• Проверьте отчеты консоли Google Search (Сканирование >Инструмент проверки файла robots.txt).

Как исправить эти ошибки

• Проверьте отчеты консоли Google Search (Сканирование >Инструмент проверки файла robots.txt).
• Убедитесь, что страницы / папки, которые вы не хотите обходить, исключены как Disallow в файл robots.txt.
• Убедитесь, что вы не блокируете какие-либо важные каталоги (JS, CSS, 404 и т. д.).

7. Слишком много неинформативного контента

Некоторые из причин:

• Контент, который не резонирует с вашей целевой аудиторией убьет конверсию и вовлеченность.
• Алгоритм Google в значительной степени оценивает качество контента, доверие и релевантность (поэтому контент, который является “полной чушью” может негативно повлиять на рейтинги).
• Слишком низкое качество содержимого сайта может снизить скорость обхода контента поисковой системы, скорость индексации и, в конечном счете, трафик.
• Вместо того, чтобы создавать контент вокруг каждого ключевого слова, собирайте контент в общие темы и пишите гораздо более подробный, полезный контент.

Как найти эти ошибки

• Выполните парсинг кроулером, чтобы найти страницы с количеством слов менее 500.
• Нет ранжирования, по ключевым словам, для которых вы пишете контент или внезапно просел трафик, нужно проанализировать динамику позиций и трафика.
• Проверьте частоту отказов страницы и время ожидания пользователя — на страницы с высокими показателями отказов нужно обращать особое внимание.

Как исправить эти ошибки

• Создайте кластер тем. Вместо того чтобы писать текст под одно ключевое слово на странице вы можете разместить 5 или 10 в одном и том же фрагменте контента и расширить его.
• Работайте над страницами, которые лучшие и держат пользователя вовлеченным в разнообразный контент — где можно рассматривать видео или аудио, инфографику или изображения.
• Сначала подумайте о своих пользователях — чего они хотят? Создавайте контент для их потребностей, ответьте на волнующие их вопросы.

8. Низкая релевантность контента

Некоторые характерные примеры:

• Создание скучных страниц с низкой вовлеченностью и смыслом.
• Предоставление поисковым системам для сканирования «пустых», неинформативных страниц.

Как найти эти ошибки

• Просмотрите свою стратегию контента. Сосредоточьтесь на создании качественных страниц, а не на количестве.
• Проверьте статистику сканирования Google и посмотрите, какие страницы просматриваются и индексируются.

Как исправить эти ошибки

• Удалите квоты при планировании контента. Добавьте контент, который добавляет ценность, а не шесть сообщений в блогах, которые вам “необходимо” публиковать, потому что это ваш план.
• Добавьте в файл Robots.txt те страницы, которые вы предпочли бы не видеть в рейтинге Google. Таким образом, Вы сфокусируете Google на хорошем материале.

9. Злоупотребление canonical тегом или неправильное его использование

Мы часто находим веб-сайты, которые неправильно используют канонические теги несколькими способами:

• Канонические теги, указывающие на неправильные страницы (например, страницы, не относящиеся к текущей странице).
• Канонические теги, указывающие на страницы с “ошибкой 404” (т. е. страницы, которые больше не существуют).
• Отсутствует канонический тег, когда CMS создает две версии страницы.

Как найти эти ошибки

• Запуск парсинга сайта в (Screaming Frog, Netpeak Spider)
• Сравните «канонический элемент ссылки» с корневым URL-адресом, чтобы увидеть, какие страницы используют канонические теги, чтобы указать на другую страницу.

Как исправить эти ошибки

• Просмотрите страницы, чтобы определить, указывают ли канонические теги на неправильную страницу.
• Кроме того, вам потребуется запустить аудит контента, чтобы понять какие страницы похожие и нуждаются в каноническом теге.

10. Неправильное использование тегов robots

<meta name="robots" content="noindex" />  

Как найти эти ошибки

• Проверьте исходный код в браузере, чтобы узнать, добавлен ли тег robots более одного раза.
• Проверьте синтаксис и не путайте атрибут ссылки nofollow с тегом nofollow robots. В первом случае запрещается переход по конкретной ссылке, во втором переход по всем ссылкам на странице.

Как исправить эти ошибки

• Решите, как вы будете управлять/контролировать деятельность роботов. Например, для WordPress плагин Yoast SEO дает вам довольно хорошие возможности для управления тегами роботов на уровне страницы.
• Убедитесь, что вы используете один плагин для управления роботом.
• Убедитесь, что вы изменили шаблоны файлов, в которых теги роботов были добавлены вручную (Внешний вид> Темы> Редактор> Заголовок).
• Где есть много повторений на уровне папок, вы можете добавить директивы Nofollow в файл robots.txt вместо того, чтобы настраивать метатег на отдельных страницах.

11.Не правильно расходуется краулинговый бюджет

Как найти эти ошибки

• Узнайте, что сканирует статистика поиска в Консоли поиска GSC> Выберите свой домен> Сканирование> Сканирование статистики
• Используйте журналы своего сервера, чтобы узнать, на что Googlebot тратит больше всего времени на вашем сайте — это поможет понять вам, находится ли он на правильных страницах — используйте такой инструмент, как https://www.botify.com/log-analyzer/ если электронные таблицы вызывают у вас тошноту.

Как исправить эти ошибки

• Уменьшите количество ошибок на вашем сайте.
• Блокируйте страницы, которые вы действительно не хотите сканировать Google.
• Уменьшите количество цепочек перенаправления, найдя все ссылки, которые ссылаются на страницу, которая сама перенаправляется, и обновите все ссылки на новую конечную страницу.
• Устранение проблем, о которых мы говорили выше, поможет вам значительно увеличить свой краулинговый бюджет или сосредоточить на нужных страницах и контенте.

12.Не используются внутренние ссылки для передачи веса и повышения релевантности

Как найти эти ошибки

• Для страниц, которые вы пытаетесь оценить, посмотрите, какие внутренние ссылки на них ссылаются. Это можно сделать в Google Analytics — есть ли у них внутренние входящие ссылки?
• Запуск сканирования inlinks с помощью Screaming Frog.
• Вы добавляете внутренние ссылки nofollow через плагин, который применяет это ко всем ссылкам? Проверьте код ссылки в браузере, просмотрев исходный код.
• Используйте одинаковое небольшое количество анкорных тегов и ссылок на вашем сайте.

Как исправить эти ошибки

• Для страниц, которые вы пытаетесь ранжировать, найдите существующий контент сайта (страницы и публикации), которые уже ранжируются в гугл по похожим запросам. Для этого нужно использовать операторы site:yoursitename.com.ua ключевое слово. Дальше смотрите на каких страницах есть такой текст и можно ставить ссылку с этой страницы на продвигаемую.
• Используйте данные обхода из Screaming Frog, чтобы определить возможности для лучшей внутренней перелинковке.
• Не перегружайте количество ссылок и ключевые слова, используемых для ссылок — сделайте его максимально естественным.
• Проверьте ссылки nofollow и удалите его, по нашему опыту внутренние ссылки не стоить закрывать тегом nofollow.

13.Ошибки использования метатегов

Как найти эти ошибки

• Если в вас WordPress используйте Yoast, чтобы увидеть, насколько хорошо работают метаданные — красный и жёлтый означают, что нужно сделать больше работы.
• Используйте SEMRush и Screaming Frog для идентификации повторяющихся тегов заголовков или отсутствующих тегов заголовка.

Как исправить эти ошибки

• Используйте Yoast, чтобы увидеть, как переделывать заголовки и метаданные, особенно мета-описание, которое претерпело перерождение благодаря увеличению количества символов в Google. Данные мета-описания раньше были установлены на 255 символов, но теперь средняя длина, которую он отображает, составляет более 300 символов – воспользуйтесь этим увеличением.
• Заполните все отсутствующие метатеги и настройте автогенерацию для разных типов страниц.
• Удалите все ключевые слова из тега meta keyword, или сам тег. Если вы используете ключевые слова в теге Keywords, то лучше этого не делать, так как данный тег почти не учитывается поисковиками, а если заспамить ключами, то будет работать в худшую сторону.
• Исключите все дубли метатегов на разных страницах, если дубли возникают из-за динамических страниц таких как пагинация сортировка, поиск и т. д. используйте canonical, noindex, follow или rel=”prev” rel=”next”(для страниц пагинации).

14.Структурированные данные

Какие типы разметки чаще всего используются:

• hCard — для разметки контактов (телефон, адрес, контактные данные);
• hReview — для разметки на страницах отзывов, позволяет размечать текст отзыва, оценку, достоинства и недостатки продукта, дату;
• hProduct и GoodRelations -разметка товаров на сайте;
• формат разметки организации и компании;
• breadcrumb data vocabulary — разметка хлебных крошек.

Какие же ошибки бывают:

• используются не те типы данных, например, цена должна быть числовым значением, а на сайте используется число и текст и в разметке тоже неправильно указывается.
• неправильная структура разметки, иногда программисты пропускают некоторые теги, чтобы ускорить процесс, но это приводит к тому, что поисковики не могут правильно распознать данные.

Как найти эти ошибки

• Используйте GSC, чтобы определить, какая схема подхватывается Google и где ошибки. (Внешний вид поиска > структурированные данные — Если фрагменты не найдены, это означает, что код неправильный или необходимо добавить код схемы).
• Проверьте разметку на соответствующих страницах с помощью инструмента по разметке Google https://search.google.com/structured-data/testing-tool/u/0/.

Как исправить эти ошибки

• Определите, какую схему вы хотите использовать на своем веб-сайте, а затем найдите соответствующий плагин. Плагин All in One Schema или RichSnippets Plugin может использоваться для управления и создания схемы.
• После создания кода проверьте с помощью помощника разметки Google https://search.google.com/structured-data/testing-tool/u/0/.
• Если Вы не используете WordPress, вы можете найти разработчика, который сможет сделать эту задачу. Google предпочитает формат JSON-LD, поэтому убедитесь, что ваш разработчик знает этот формат. Также преимущество JSON-LD в том, что разметка только в коде и не влияет на внешний вид элементов на сайте.

Подводим итоги