10 действенных способов заставить Google индексировать ваш сайт

Если ваш сайт не индексируется Google, то он практически невидим. Он не будет попадать в результаты поиска и получать естественный трафик. Совсем. Вообще. Ничего.

Если вы читаете эту статью, то это вам уже и так известно. Так что перейдем сразу к делу.

Эта статья поможет вам решить три проблемы:

1. Ваш сайт вообще не индексируется.
2. Часть страниц сайта индексируется, а часть — нет.
3. Свежеопубликованные статьи индексируются недостаточно быстро.

Но сперва давайте убедимся, что мы имеем в виду одно и то же, когда говорим об «индексировании».

Что такое краулинг и индексирование?

Google находит новые страницы при помощи паука, который ползает по Всемирной паутине («краулинг» дословно означает «ползание») и добавляет страницы в свою базу данных — индекс. Этот паук называется поисковым роботом, а у робота Google есть собственное имя — Гуглбот (Googlebot).

Запутались? Давайте дадим определения основным терминам.

• Краулинг — процесс перехода по гиперссылкам в Интернете с целью нахождения нового контента.
• Индексирование — процесс сохранения каждой веб-страницы в обширной базе данных.
• Поисковый робот — Программа, которая выполняет краулинг.
• Googlebot — поисковый робот Google.

Вот видео от Google, в котором этот процесс подробно объясняется:

Когда вы ищете что-то в поисковике Google, он выдает все релевантные страницы из своей базы данных — индекса. Поскольку часто запросу могут соответствовать миллионы страниц, алгоритм ранжирования Google делает все возможное, чтобы отсортировать их так, чтобы первыми шли страницы, которые лучше всего отвечают запросу.

Тут важно понимать, что индексирование и ранжирование — это совершенно разные вещи.

Индексирование — это регистрация на участие в гонке, а ранжирование — это распределение призовых мест.

Нельзя победить в гонке, не зарегистрировавшись сперва.

Как узнать, есть ли ваш сайт в индексе Google

Откройте сайт Google и введите в поиск site:ваш_сайт.com

Это число примерно показывает, сколько страниц вашего сайта содержится в индексе Google.

Если вы хотите узнать состояние индексирования конкретного URL-адреса, используйте тот же самый оператор site:ваш_сайт.com/адрес_страницы.

Если результатов не будет, значит, страницы нет в индексе.

Стоит заметить, что если вы пользуетесь Google Search Console, то можете воспользоваться отчетом «Покрытие», чтобы получить более точные сведения о состоянии индексирования вашего сайта. Просто перейдите в раздел:

Google Search Console > Индексирование > Покрытие

Посмотрите на число действительных страниц (с предупреждениями и без).

Если эти числа в сумме отличаются от нуля, значит, по крайней мере часть страниц вашего сайта содержится в индексе Google. Если же оба числа равны нулю, то у вас серьезная проблема, поскольку ни одна страница сайта не проиндексирована.

Примечание.

 Вы не пользуетесь Google Search Console? Зарегистрируйтесь. Это бесплатно. Каждый владелец сайта, которого заботит поисковый трафик, должен использовать Google Search Console. Да, настолько это важно. 

В Search Console можно также проверить, проиндексирована ли конкретная страница. Для этого вставьте ее URL-адрес в Инструмент проверки URL.

Если страница проиндексирована, то сервис выдаст сообщение «URL есть в индексе Google».

Если нет — то «URL нет в индексе Google».

Как сделать так, чтобы Google индексировал ваш сайт

Обнаружили, что Google не индексирует ваш сайт или страницу? Попробуйте следующее:

1. Откройте Google Search Console.
2. Перейдите в Инструмент проверки URL.
3. Вставьте в строку поиска URL-адрес, который вы хотите видеть в индексе Google.
4. Подождите, пока Google проверит адрес.
5. Нажмите кнопку «Запросить индексирование».

Это полезно делать, когда вы публикуете новую статью или страницу. Так вы напрямую сообщаете Google о том, что добавили что-то новое на свой сайт и что поисковику следует взглянуть на это.

Однако непосредственный запрос не поможет решить глубинные проблемы, которые препятствуют индексированию старых страниц. Если это ваш случай, то пройдитесь по приведенному ниже списку, чтобы диагностировать и решить проблему.

Вот ссылки на каждую тактику — на случай, если вы пробовали часть из них:

1. Удалите блокирующие условия из файла robots.txt
2. Удалите шальные теги noindex
3. Добавьте адрес страницы в файл sitemap
4. Удалите шальные теги canonical
5. Проверьте, не является ли страница сиротой
6. Почините внутренние nofollow-ссылки
7. Добавьте «сильные» внутренние ссылки
8. Убедитесь, что страница уникальна и обладает ценностью
9. Удалите некачественные страницы (чтобы оптимизировать «краулинговый бюджет»)
10. Получите качественные обратные ссылки

 

1) Удалите блокирующие условия из файла robots.

txt

Google не индексирует весь ваш сайт? Причиной может быть блокирующее условие в файле robots.txt.

Чтобы проверить эту возможность, перейдите по адресу ваш_сайт.com/robots.txt.

Посмотрите, нет ли в тексте одного из этих фрагментов:

User-agent: Googlebot</p>
<p>Disallow: / 

User-agent: *</p>
<p>Disallow: / 

Оба этих фрагмента сообщают Гуглботу, что ему нельзя сканировать страницы вашего сайта. Чтобы исправить проблему, просто удалите их. И всё.

Блокирующее условие в файле robots.txt может быть виновным и в том случае, когда Google не индексирует отдельную страницу. Чтобы проверить этот вариант, вставьте адрес страницы в Инструмент проверки URL в Google Search Console. Откройте раздел «Покрытие» и поищите ошибку «Сканирование разрешено? Нет: заблокировано через robots.txt».

Эта ошибка указывает на то, что страница заблокирована в файле robots.txt.

В таком случае поищите в файле robots.

txt любые правила «disallow», относящиеся к странице или содержащему ее подкаталогу.

Важная страница заблокирована для индексирования в файле robots.txt.

Если нужно, удалите эти правила.

2) Удалите шальные теги noindex

Google не станет индексировать страницы, если попросить об этом. Так вы можете оградить некоторые страницы от публичного доступа. Есть два способа сделать это:

Способ 1: тег meta

Страницы с одним из этих тегов meta в секции <head> не индексируются Google:

<meta name=“robots” content=“noindex”>

<meta name=“googlebot” content=“noindex”>

Это мета-тег robots, который сообщает поисковым системам, следует ли им индексировать данную страницу.

Примечание.

 Главная часть — это значение “noindex”. Если вы видите его, значит, страница помечена как неиндексируемая.

Чтобы найти на своем сайте все страницы с мета-тегом noindex, запустите сканирование в сервисе Site Audit от Ahrefs. Перейдите в отчет Indexability  («Индексируемость»). Поищите предупреждения «Noindex page» («Неиндексируемая страница»).

Нажмите на одно из них, чтобы увидеть все такие страницы. Удалите мета-тег noindex со всех страниц, где он не нужен.

Способ 2: X‑Robots-Tag

Поисковые роботы также учитывают заголовок HTTP-ответа X‑Robots-Tag. Вы можете реализовать его на скриптовом языке для серверной стороны типа PHP, через файл .htaccess file или через изменение конфигурации своего сервера.

Инструмент проверки URL в Search Console позволяет узнать, блокирует ли Google сканирование страницы из-за заголовка. Просто введите свой URL-адрес, а затем поищите ошибку «Индексирование разрешено? Нет: обнаружено значение ‘noindex’ в HTTP-заголовке X‑Robots-Tag».

Если вы хотите исправить эту проблему на своем сайте, запустите сканирование в сервисе Site Audit от Ahrefs, а затем примените фильтр «Robots information in HTTP header» («Информация для роботов в заголовке HTTP») в разделе Page Explorer:

Попросите своего разработчика исключить страницы, которые нужно индексировать, из числа тех, что возвращают такой заголовок

Рекомендуем прочесть: Использование HTTP-заголовка X‑Robots-Tag для поисковой оптимизации: Секреты и хитрости

 

3) Добавьте адрес страницы в файл sitemap

Файл sitemap сообщает Google, какие страницы вашего сайта важны, а какие нет. Также он может рекомендовать, как часто следует повторно сканировать определенные страницы.

Google способен находить страницы на вашем сайте независимо от того, представлены ли они в файле sitemap, но хорошей практикой является указание важных страниц. В конце концов, нет смысла усложнять работу Google.

Чтобы проверить, указана ли страница в файле sitemap, используйте Инструмент проверки URL в Search Console. Если вы увидите ошибку «URL нет в индексе Google» и «Sitemap: н/д», значит, страницы нет в файле sitemap или индексе.

Не пользуетесь Search Console? Перейдите по URL-адресу своего файла sitemap — обычно этоваш_сайт.com/sitemap.xml — и поищите адрес страницы.

Либо, если вы хотите найти все сканируемые и индексируемые страницы, которых нет в файле sitemap, запустите сканирование в сервисе Site Audit от Ahrefs. Перейдите в Page Explorer и примените следующие фильтры:

Вы получите список страниц, которые следует добавить в файл sitemap. Когда вы это сделаете, сообщите Google о том, что вы обновили свой файл sitemap, перейдя по этому URL:

http://www.google.com/ping?sitemap=<полный_URL_адрес_файла_sitemap>

Только подставьте туда URL-адрес своего файла sitemap. Вы увидите что-то подобное:

Это должно ускорить индексирование страницы поисковой системой.

 

4) Удалите шальные теги canonical

Тег каноничности (тег canonical) сообщает Google о канонической версии страницы. Выглядит он так:

<link rel=“canonical” href=“/страница.html”/>

Большая часть страниц либо не имеют тега canonical, либо содержат так называемый автореферентный тег canonical. Он сообщает поисковой системе о том, что страница сама является канонической, а возможно, и единственной версией. Другими словами, вы хотите, чтобы эта страница индексировалась.

Но если на страницу затесался шальной тег canonical, он может направить Google на каноническую версию страницы, которая на самом деле не существует. В таком случае страница не будет проиндексирована.

Чтобы проверить такую возможность, воспользуйтесь Инструментом проверки URL от Google. Если тег каноничности указывает на другую страницу, то вы увидите предупреждение «Альтернативная каноническая страница».

Если такого быть не должно, и вы хотите, чтобы страница индексировалась, удалите тег каноничности.

ВАЖНО

Имейте в виду, что теги каноничности не всегда плохи. Чаще всего они добавляются не просто так. Если вы видите, что ваша страница содержит такой тег, проверьте страницу, которая указана как каноническая. Если окажется, что это и правда приоритетная версия страницы, которую нужно индексировать, то тег canonical следует оставить.

Если вы хотите быстро найти все шальные теги canonical на своем сайте, запустите сканирование в сервисе Site Audit от Ahrefs. Перейдите в раздел Page Explorer. Используйте такие настройки:

Они запустят поиск страниц в файле sitemap с неавтореферентными тегами каноничности. Если поиск с этим фильтром выдаст какие-либо результаты, вам следует разобраться с ними, поскольку вы наверняка хотели бы, чтобы эти страницы индексировались.

Высока вероятность того, что эти страницы либо содержат ошибочные теги каноничности, либо наоборот — не должны находиться в файле sitemap.

 

5) Проверьте, не является ли страница сиротой

Страницы-сироты — это такие страницы, на которые не ведет ни одной внутренней ссылки.

Поскольку Google находит новый контент, перемещаясь по Всемирной паутине от одной страницы к другой, он не может найти таким образом страницы-сироты. Точно так же их не смогут найти посетители сайта.

Чтобы найти страницы-сироты, просканируйте свой сайт при помощи сервиса Site Audit от Ahrefs. Затем откройте отчет Incoming links (Входящие ссылки) для ошибок «Orphan page (has no incoming internal links)» («Страница-сирота (не имеет входящих ссылок)»):

В нем показаны все индексируемые страницы, указанные в файле sitemap, на которые при этом не ведет ни одна внутренняя ссылка.

ВАЖНО

Чтобы это сработало, должны быть выполнены два условия:

1. Все страницы, которые вы хотите видеть индексированными, указаны в вашем файле sitemap.
2. При создании проекта в сервисе Site Audit от Ahrefs вы поставили галочку «Использовать страницы в файлах sitemap как исходные пункты для сканирования».

Вы не уверены, что все страницы, которые вы хотите видеть индексированными, указаны в файле sitemap? Попробуйте следующее:

1. Загрузите полный список страниц вашего сайта (через систему CMS).
2. Просканируйте сайт (при помощи Site Audit от Ahrefs или подобного сервиса).
3. Сравните полученные списки URL-адресов.

Все адреса, не найденные в процессе сканирования, принадлежат страницам-сиротам.

Вы можете решить проблему страниц-сирот двумя способами:

1. Если страница не важна, удалите ее и уберите из файла sitemap.
2. Если страница важна, добавьте ее в схему внутренних ссылок сайта.

 

6) Почините внутренние nofollow-ссылки

Nofollow-ссылки — это ссылки с тегом rel=“nofollow”. Они препятствуют передаче показателя PageRank целевому URL-адресу. К тому же, Google не сканирует nofollow-ссылки.

Вот что об этом заявляют в Google:

По сути, использование атрибута nofollow заставляет Google не включать целевые ссылки в общий граф сети. Тем не менее, целевые страницы все равно могут попасть в наш индекс, если на других сайтах встретятся ссылки на них без атрибута nofollow либо если URL-адреса будут указаны в файле Sitemap.

Короче говоря, вам нужно убедиться, что внутренние ссылки на индексируемые страницы не должны иметь атрибута nofollow.

Для этого просканируйте свой сайт при помощи Site Audit от Ahrefs. В отчете Incoming links (Входящие ссылки) поищите индексируемые страницы с ошибками «Page has nofollow incoming internal links only» («На страницу ведут только внутренние nofollow-ссылки»):

Удалите атрибут nofollow из внутренних ссылок, если вы хотите, чтобы Google индексировал страницы, на которые они ведут. Если нет, то удалите страницы либо пометьте их тегом noindex.

Рекомендуем прочесть: Что такое nofollow-ссылки? Все, что вам нужно знать (без жаргона!)

 

7) Добавьте «сильные» внутренние ссылки

Google находит новый контент, сканируя ваш сайт. Если вы пренебрегаете созданием внутренних ссылок, то поисковик может и не найти некоторые страницы.

Одно из простых решений этой проблемы — добавить несколько внутренних ссылок, ведущих на нужную страницу. Разместить ссылки можно на любых других страницах, которые Google может сканировать и индексировать. Но если вы хотите, чтобы Google проиндексировал целевой контент как можно быстрее, то лучше всего разместить ссылку на одной из самых «сильных» страниц.

Почему? Потому что Google сканирует такие страницы чаще.

Для этого перейдите в Site Explorer от Ahrefs, введите адрес своего сайта, а затем откройте отчет Best by links (Лучшие по ссылкам).

В нем будут перечислены все страницы вашего сайта, отсортированные по показателю URL Rating (UR). Другими словами, он показывает первыми самые авторитетные страницы.

Пролистайте этот список, чтобы найти подходящие страницы, куда можно добавить внутренние ссылки на интересующую страницу.

Например, если мы хотим добавить внутреннюю ссылку на руководство по гостевому постингу, то руководство по линкбилдингу вполне подойдет для этого. Последняя страница очень кстати оказывается 11‑й по авторитетности в нашем блоге:

В следующий раз, когда Google будет сканировать эту страницу, он обнаружит новую ссылку и перейдет по ней.

СОВЕТ

Вставьте адрес страницы, на которой вы разместили внутреннюю ссылку, в Инструмент проверки URL от Google. Нажмите «Запросить индексирование», чтобы сообщить поисковой системе о том, что содержание страницы изменилось, и ее следует отсканировать заново. Это может ускорить процесс нахождения и индексирования той страницы, на которую ведет ссылка.

 

8) Убедитесь, что страница уникальна и обладает ценностью

Google, как правило, не индексирует некачественные страницы, которые не представляют ценности для пользователей. Вот что Джон Мюллер из Google говорил об индексировании в 2018 году:

Мы не индексируем все существующие URL-адреса, и это нормально. Сосредоточьтесь на том, чтобы делать сайт замечательным и вдохновляющим, и тогда у вас не будет проблем с индексированием.

—  John  (@JohnMu) January 3, 2018

То есть, если вы хотите, чтобы Google проиндексировал ваш сайт или страницу, их содержание должно быть «замечательным и вдохновляющим».

Если вы не находите технических причин отсутствия индексирования, возможно, виновником является отсутствие ценности. Поэтому нелишне будет взглянуть на страницу свежим взглядом и спросить себя, действительно ли эта страница имеет ценность и принесет ли она пользу тому, кто перейдет на нее из результатов поиска.

Если ответом будет «нет», значит, вам следует улучшить свой контент.

Вы можете использовать Site Audit от Ahrefs и URL Profiler, чтобы найти другие потенциально некачественные страницы, которые не индексируются. Для этого перейдите в раздел Page Explorer в Site Audit и установите такие настройки:

Так вы получите «слабые» страницы — индексируемые, но не приносящие в данный момент естественного трафика. Высока вероятность того, что они не проиндексированы.

Экспортируйте отчет, а затем вставьте все URL-адреса в URL Profiler и запустите проверку Google Indexation (Индексирование в Google).

Источник: https://urlprofiler.com/blog/google-indexation-checker-tutorial/

ВАЖНО

Если вы выполняете эту проверку для большого числа страниц (больше 100), то рекомендуется использовать прокси. Иначе вы рискуете тем, что Google забанит ваш IP-адрес. Если вариант с прокси не подходит, то введите в поиск Google «массовая проверка индексации в google бесплатно». Есть целый ряд инструментов, но в большинстве из них нельзя проверить более 25 страниц за раз.

Проверьте качество страниц, которые не индексируются. Улучшите качество, где это необходимо, и запросите индексирование в Google Search Console.

Также следует проверить возможность дублирования контента. Google старается не индексировать страницы-копии и очень похожие страницы. Загляните в отчет Content quality (Качество контента) в сервисе Site Audit, чтобы проверить этот вариант.

 

9) Удалите некачественные страницы (чтобы оптимизировать «краулинговый бюджет»)

Слишком большое число некачественных страниц на сайте приводит к пустой трате краулингового бюджета.

Вот что об этом говорят в Google:

[Страницы-с-низкой-ценностью] отвлекают на себя активность сканирования от страниц, которую действительно имеют ценность, что способно приводить к значительным задержкам в обнаружении хорошего контента на сайте.

Представьте, что учитель проверяет сочинения, одно из которых — ваше. Если ему нужно оценить десять сочинений, то он довольно быстро доберется до вашего. Если сочинений будет сто, то ему потребуется гораздо больше времени. Если их будут тысячи, то нагрузка будет слишком высокой, и учитель может вообще никогда не добраться до оценки вашего сочинения.

В Google заявляют, что «краулинговый бюджет […] — это не то, о чем большинству стоит беспокоиться», и что «если на сайте меньше нескольких тысяч адресов, то большую часть времени он будет сканироваться эффективно».

Тем не менее, удаление некачественных страниц с вашего сайта никогда не повредит. Это только пойдет на пользу краулинговому бюджету.

Вы можете использовать наш шаблон аудита контента, чтобы найти потенциально некачественные и нерелевантные страницы, которые можно удалить.

 

10) Получите качественные обратные ссылки

Обратные ссылки сообщают Google о том, что страница, на которую они ведут, важна. Раз кто-то дает на нее ссылку, значит, у нее должна быть некая ценность, верно? Поэтому Google индексирует страницы с обратными ссылками.

Для полной прозрачности Google индексирует не только страницы, имеющие обратные ссылки. Есть множество (миллиарды) проиндексированных страниц без обратных ссылок. Но поскольку Google считает страницы с качественными ссылками более важными, поисковик будет быстрее и чаще сканировать такие страницы, чем те, у которых нет обратных ссылок. То есть, индексирование страниц с качественными обратными ссылками происходит быстрее.

В нашем блоге есть много материалов по созданию качественных обратных ссылок.

Ниже приведены ссылки на некоторые из них.

Индексирование и ранжирование — это разные вещи

Наличие вашего сайта в индексе Google не означает, что он будет попадать в выдачу и приносить трафик.

Это разные вещи.

Индексирование означает только то, что Google известно о существовании вашего сайта. Это не означает, что ваш сайт будет показан в топе выдачи по подходящим запросам.

Тут-то и вступает в дело SEO — искусство оптимизации веб-страниц для попадания в топ выдачи по определенным запросам.

В общих чертах поисковая оптимизация (SEO) включает в себя:

• Определение тем, которые ищут ваши клиенты.
• Создание контента на эти темы.
• Оптимизацию созданных страниц под целевые ключевые фразы.
• Наращивание обратных ссылок.
• Постоянное поддержание контента в актуальном состоянии.

Вот видео, которое поможет разобраться в основах SEO:

…И несколько статей:

Напоследок

Есть только две возможные причины, почему Google не индексирует ваш сайт или веб-страницу:

1. Технические проблемы, которые не дают поисковому роботу сделать это.
2. Качество контента — Google считает ваш сайт или страницу некачественными и бесполезными для своих пользователей.

Вполне возможно, что имеют место обе эти проблемы. Но, по моему опыту, технические проблемы встречаются гораздо чаще. Технические проблемы также могут стать причиной автоматического создания индексируемого некачественного контента (например, проблемы с фасетной навигацией). Это нехорошо.

Но проход по приведенному выше списку в девяти случаях из десяти должен решить проблемы индексирования.

Только не забывайте, что индексирование и ранжирование — это разные вещи. Выполнение поисковой оптимизации по-прежнему жизненно необходимо, если вы хотите вывести свои страницы в топ выдачи по подходящим поисковым запросам и привлечь стабильный поток естественного трафика.

Перевела Кирик Наталья, владелец студии по написанию текстов для сайтов WordFactory.ua

8 советов, как проиндексировать сайт в Google

Каждый мечтает увидеть свой сайт на первой странице Google поиска, а в идеале даже вверху списка. Не имеет значение деятельность сайта: сам факт пребывания так высоко при ранжировании дает широкие возможности для дальнейшего развития.

---

Попасть на первую страницу Google поиска сложнейшая задача. Есть шаги, которые вы обязаны выполнить, чтобы иметь потенциальный шанс забраться на главные поисковые страницы. Мы опишем 8 главных советов, которые могут, если и не гарантировать, то приблизить вероятность высокой индексации вашего сайта в Google. Представьте, что действие – это кубик. И если с одним кубиком ничего крутого построить не удастся, то все пройденные шаги создадут вам сильную платформу для прогресса.

🏢 1. Качественный хостинг – фундамент для высоких мест в поисковике

Алгоритмы Google проверяют стабильность работы вашего сайта: ресурс, который медленно загружается или страдает от множества ошибок, попадет под красный восклицательный знак машинных алгоритмов, тем самым исключая возможность высоких позиций во всеобщем списке сайтов. Качественный хостинг будет гарантировать плавный и эффективный  рабочий процесс. В результате, аналитические мощности, рассматривая ваш сайт, отметят его стабильным и надежным. Но надежный хостинг – это не только стабильное подключение, а совокупность и других ключевых факторов, таких как профессиональная техническая поддержка в режиме 24/7. С HostPro вы можете на это рассчитывать.

Хороший хостинг – это отличный старт. Но каким должен быть следующий шаг, чтобы двигаться к своей главной цели?

🔐 2. Установите SSL сертификат

Безопасность в интернете имеет фундаментальное значение, об этом раз за разом напоминает нам Google. Вы никогда не сможете подняться вверх по лестнице поиска, если будете подвергать своих посетителей опасности и игнорировать небезопасное подключение. Решить этот вопрос сможет сертификат – бесплатный SSL сертификат, дешевый SSL, сертификат с поддоменами или любой другой. Сделайте подключение на страницах вашего ресурса надежным и продемонстрируйте это и своим пользователям, и поисковым алгоритмам. Сайты, работающие по HTTPS протоколу, ранжируются приоритетнее тех, которые продолжают подключение по HTTP.

📝 3. Создавайте отличный контент

Большинство сайтов создают блоги, где делятся мыслями, новостями и различными советами. Создавая отличный контент, вы предоставляете своим посетителям материал для чтения, а поисковикам возможность схватиться за определенные фразы, темы или запросы. Пользователи увидят интересный и познавательный текст, а алгоритмы обратят внимание на актуальность.

Всех интересует читабельный, интересный и лаконичный текст, а не машинный набор слов.

Подумайте, как можно связать серию интересных статей о вашей деятельности, вписав в текста ключевые запросы по темам, в которых хотите добиться высоких показателей. Важно понять, что переспам ключевых фраз не несет никакой пользы, а поисковик такой материал проигнорирует.

👌 4. Устанавливайте контакты с новыми площадками

На авторитет сайта влияет насколько другие ресурсы ссылаются на его страницы, расставляя гиперссылки. Сам процесс распространения и создания ссылок – еще один важный фактор, который стоит брать во внимание при раскрутке платформы. Наиболее действенными способами послужат поиски новых деловых партнеров, знакомства со сторонними компаниями, которые работают в близкой с вами, но не в той же сфере (сайту ресторана – магазин по продаже овощей, к примеру).

Анализаторы Google видят распространенные ссылки как доказательство, что вашему сайту доверяют сайты, а это значит, что и Google имеет основания для этого доверия. Чем авторитетнее будут сайты, оставляющие гиперссылки на ваши страницы, тем выше вероятность лучшей индексации.

🔎 5. Используйте Google Analytics

Google Analytics – хороший способ для отслеживания статистики вашего сайта в режиме реального времени. Благодаря этим инструментам можно увидеть статистику просмотра страниц, показатели отказов, самые популярные записи и многое другое. Если ваш сайт работает на WordPress, тогда дополнительно можно установить утилиту Monster Insights, получив прямой доступ к аналитической информации прямо из админки сайта.

После регистрации в Google Analytics в Google будет отправлено уведомление, что у вас есть веб-сайт, и его стоит просканировать. Это ускорит процесс сканирования.

👀 6. Чаще делитесь контентом

Если вы не занимаетесь публикацией контента со своих страниц в социальных сетях, то очень зря. Один из ключевых факторов, влияющий на определение рейтинга вашего сайта после индексации, зависит от социальных взаимодействий.

Но и здесь действует вышеописанное правило: не стоит создавать контент ради контента, пытайтесь делать то, о чем люди будут говорить и что захотят обсуждать. Если пользователи делятся вашими публикациями – это признак хорошего тона.

📌 7. Создайте карту сайта

Карта сайта – расположение всего контента на страницах ресурса. Когда сканер имеет доступ к такой карте, он может определить изменения и появление нового, что изменит положение индексации.

Существует множество плагинов, которые способны помочь в управлении и создании правильного контента.

Одним из лучших плагинов в этом деле является Yoast SEO – он не только позволяет управлять всем SEO контентом, но и помогает оптимизировать, улучшить читабельность и создать карту сайта для Google.

🔩 8. Отправьте сайт на проверку вручную

Чтобы ускорить процесс индексации, можно отправить свой сайт отправить на проверку вручную. Инструменты Google для веб-мастеров предлагают целый спектр функций, которые можно использовать для улучшения позиций в поисковике. Вы узнаете как улучшить и усовершенствовать процесс индексации.

Google-инструменты бесплатны – в идеале каждый владелец бизнеса должен, как минимум, быть знаком с ними, улучшая индексирование, благодаря рычагам, которые предоставляет сама компания.

---

Чтобы вывести собственный сайт на первую страницу выдачи, требуется много кропотливой работы и креативных идей. Вы должны уметь сочетать технические умения c маркетологами, авторами статей и сео-специалистами, чтобы развиваться по нужным направлениям.

По мере выполнения всех пунктов, а также периода времени, вы заметите позитивные изменения, с каждым разом преодолевая очередной барьер на пути к верхним позициям.

Этот процесс не будет быстрым, но весь органический трафик, который вы получите, находясь на главной странице поиска, будет стоить всей тяжелой работы.

Как быстро проиндексировать сайт в Google и Яндекс

Добро пожаловать на вебсайт Sitexpert (далее — «Вебсайт»). Выражения «мы», «нам», «наше», и Sitexpert относятся к Sitexpert и его собственникам. Выражение «Вы» относится к пользователю, который использует Вебсайт для получения информации о рейтинге своего сайта в Интернете. 

Используя этот Вебсайт в любой форме Вы подтверждаете, что обязуетесь соблюдать данные Правила. Если Вы не принимаете данные Правила — не используйте Вебсайт. Мы  оставляем за собой право в любое время, на наше усмотрение, менять или дополнять Правила без предварительного предупреждения, а Ваше последующее использование Вебсайта означает Ваше принятие Правил.

Данный Вебсайт позволяет Вам получить информацию о том на каком месте находится Ваш сайт в той или иной поисковой системе по тем запросам, которые Вы укажите. 

 

1. Использование Вебсайта

1.1. Используя данный Вебсайт, Вы подтверждаете что:

1.2. Вы достигли 18-летнего возраста.

1.3. У вас есть юридические  полномочия давать и принимать правовые обязательства.

1.4. Вы будете использовать этот Вебсайт согласно Правил.

1.5. Пользователь Вебсайта, размещая на Вебсайте информацию, добровольно предоставляет нам, а также третьим лицам, которые имеют доступ к этому Вебсайту, свое безусловное согласие на обработку своих персональных данных (которые содержатся в информации, собранной и/или размещаемой на Вебсайте и/или отправляемой другим Пользователям Вебайта).

1. 6. Вы соглашаетесь с тем, что мы имеем право присылать на указанный Вами при регистрации  e-mail и/или мобильный телефон информационные сообщения в т.ч. и рекламного характера.

1.7. Вы соглашаетесь с тем, что мы предоставляем данные услуги на безоплатной основе и в любое время без Вашего согласия можем установить оплату.

1.8. Вы соглашаетесь с тем, что мы неограничены во времени по обработке и предоставлению отчета по Вашему запросу.

1.9. Вы соглашаетесь с тем, что данные полученные  по Вашему запросу могут быть неточными в связи с сбоями в работе поисковых систем на которых тестировался Ваш сайт.

 

2. Отказ от гарантий

Вы понимаете, следующее (за исключением случаев, которые запрещены законом):

2.1. Использование вами вебсайта и/или услуг осуществляется исключительно на ваш риск. Сайт и услуги предоставляются на условиях «как есть» и «как доступно». Мы отрицаем любого вида гарантии, включая, но не ограничиваясь, гарантиями товарности, пригодности для конкретной цели и неиспользования.

2.2. Мы не даем никаких гарантий, что:

a) вебсайт или услуги будут соответствовать вашим требованиям;

b) вебсайт или услуги будут предоставляться непрерывно, своевременно, безопасно, или без ошибок;

c) результаты, которые могут быть получены посредством использования вебсайта или услуг, будут точными и надежными;

d) качество любых продуктов, служб, информации или других материалов, полученных вами через вебсайт или услуги, будет соответствовать вашим ожиданиям, и

e) ошибки в программном обеспечении будут исправлены, или, что любая часть сайта будет без вирусов, червей, троянских коней и. т.д. ;

f) любой материал, загруженный или иным образом полученный посредством использования вебсайта или обслуживания, осуществляется на ваше собственное усмотрение и, что только вы будете нести ответственность за любой ущерб, нанесенный вашему компьютеру, или утерю данных в результате загрузки любых таких пользований;

g) никакая консультация или информация, письменная или устная, полученная вами от нас не предусматривает никаких гарантий, прямо не указанных в правилах.

3. Ограничение ответственности

3.1. Вы понимаете и согласны с тем, что sitexpert, ее должностные лица, директора, сотрудники, агенты, юристы, спонсоры, рекламодатели, филиалы, правопреемники («мы»), не являются ответственными за любые штрафные убытки, включая, но не ограничиваясь, убытками от потери прибыли, репутации, использования данных и других нематериальных убытков, в результате:

a) использования или невозможности использования вебсайта;
b) несанкционированного доступа или изменения ваших сообщений или данных;
c) заявлений любого третьего лица на вебсайте или услугах;
d) любых других вопросов, относящихся к вебсайту.

3.2. Если вы недовольны вебсайтом или нормами правил или у вас возникают еще какие-либо споры или разногласия с sitexpert, то вашим единственным и исключительным правом правовой защиты будет прекращение использование вебсайта.

4. Общая информация

4.1. Настоящие Правила являются соглашением между Вами и собственниками Sitexpert и регламентирует использование Вами Вебсайта, заменяя собой любые предыдущие соглашения между Вами и Sitexpert. На вас также могут распространяться дополнительные положения и условия, которые могут применяться при использовании сопутствующих услуг, содержания третьей стороны или программного обеспечения других производителей. Данные правила, а также  взаимоотношения между вами и Sitexpert регулируются законодательством Украины. Вы и Sitexpert соглашаетесь подчиняться личной и исключительной юрисдикции судов, расположенных по месту нахождения ответчика, если иное не предусмотрено законодательством Украины. Вы признаете, что Sitexpert вправе принимать правовые меры против Вас, если ваши действия нарушают данные Правила или идут в ущерб Sitexpert.

4.2. Вы подтверждаете, что Вы прочитали, поняли и соглашаетесь с данными Правилами.

5. Нарушения

Пожалуйста, сообщайте о любых нарушениях настоящих Правил нашей службе поддержки или по электронной почте.

Индексация сайта в Google — как Гугл индексирует сайты

О чем статья:

• Зачем поисковики индексируют сайты;

• Почему это важно пользователям и компаниям;

• Что влияет на индексацию;

• Как проиндексировать сайт в Google;

• Как проверить результат и избежать ошибок.

Индексация сайта: зачем она нужна и как выполняется

На конец 2020 года в интернете насчитывается около 2 миллиардов веб-сайтов. Из них активны примерно 400 миллионов. И каждый день создаются тысячи новых страниц. Чтобы пользователи могли легко и быстро находить в таком объеме данных именно то, что их интересует, поисковые системы четко структурируют информацию и размещают её в своих каталогах — в них хранятся сведения обо всех страницах всех сайтов в интернете.

Индексация сайтов – это, по сути, внесение всей имеющейся на страницах информации, включая изображения, тексты, ключевые фразы, ссылки, и видео, в каталог поисковика. Только после этого сайты могут попасть в поисковую выдачу.

Алгоритмы индексации

Индексацию выполняют поисковые роботы. Они в автоматизированном режиме проверяют обновление контента на сайте. Считается, что среди всех поисковых систем именно Google выполняет проверку новых ресурсов быстрее всего. Тем не менее, на скорость работы роботов также влияет посещаемость сайта и частота обновления информации. Например, на новостные порталы, где контент обновляется постоянно и через короткие промежутки времени, роботы заходят до нескольких раз в день. Если информация обновляется реже, то индексация может проводиться 1-2 раза в неделю. Если содержание страницы не обновлялось давно, робот будет заходить на нее, но не чаще раза в неделю.

За одно посещение робот индексирует 20-30 страниц, чтобы не перегружать сервер. Если на сайте больше страниц, робот зайдет на него несколько раз.
Каждый поисковик устанавливает глубину индексации – то есть, на сколько уровней робот может опуститься, переходя по ссылкам одного ресурса. Как правило, он изучает верхние уровни и при достижении определенной метки покидает сайт. Это означает, что при разветвленной структуре некоторые вложенные страницы могут остаться непроиндексированными. 

Ранжирование сайта после индексации

После того, как роботы закончат анализ страницы, они вносят всю информацию в базу данных каталога, ранжируют сайт и определяют его авторитетность. Показатели PageRank зависят от количества и качества ссылок, которые ведут на ресурс – чем больше ссылочная масса, тем выше рейтинг. Авторитетность страниц определяется по 10-балльной шкале. Если сайт набрал 4-5 баллов, то это хороший показатель. 

Требования к сайту для индексации

Есть три основных фактора, которые влияют на индексацию.

• Посещаемость ресурса. Содержание страниц должно соответствовать запросам пользователей в поисковике. Для этого в текстах и метатегах необходимо размесить ключевые слова.

• Качество контента. Контент должен быть уникальным и полезным, а тексты написаны без грамматических ошибок. Роботы отслеживают ошибки и снижают авторитетность сайтов. Желательно регулярно обновлять контент. О том, какой контент нравится Google, читайте в нашей статье.

• Внутренняя оптимизация. Сайт должен иметь понятную и удобную для пользователей структуру. Необходимо, чтобы раздел контактов и обратной связи содержал релевантную информацию. Желательно размещать портфолио и отзывы. Все исходящие ссылки должны быть работающими. 

Как добавить сайт на индексацию в Google?

Для того чтобы сайт появился в результатах поиска Google, не обязательно предпринимать какие-либо действия. Рано или поздно поисковые роботы найдут его и проиндексируют. Но, как мы говорили выше, боты перемещаются по сайту, переходя по ссылкам, и если ссылочной массы, ведущей на страницу, недостаточно, то пройдет довольно много времени, прежде чем роботы попадут на неё.

Чтобы помочь поисковым алгоритмам быстрее понять, как организован контент на вашем сайте, и точнее проиндексировать его, Google предлагает бесплатный инструмент Search Console. С его помощью можно подавать запросы на индексирование, узнать, как роботы видят сайт, выявить и устранить проблемы. В Google Search Console можно получить информацию, которая поможет улучшить взаимодействие ресурса с системами и пользователями. 

Индексация сайта с помощью Search Console

Для индексации в Google, выполните следующие шаги:

• Создайте Google-аккаунт, если у вас его еще нет, или авторизуйтесь в существующем.

• Перейдите в раздел Инструменты веб-мастера по ссылке https://www.google.com/webmasters/tools/submit-url.

• Введите адрес главной страницы сайта и пройдите проверку, что вы не робот.

• Подтвердите свои права на сайт. В инструкции Google предлагает 8 вариантов подтверждения и напоминает, что лучше иметь несколько запасных на случай, если основной перестанет работать.

• Создайте файл Sitemap. xml. Это карта сайта, в которой содержится информация о структуре и контенте ресурса – страницах, изображениях, видео и пр. В файле можно указать все дополнительные сведения: какие разделы важны, когда страница обновлялась последний раз, есть ли версии на других языках и другие. Также можно добавить специфические данные о видео и изображениях: продолжительность записи, возрастные ограничения, тип файла, условия лицензирования и т.д.

• Проверьте, что в файле Sitemap.xml нет ошибок. В разделе Инструменты веб-мастера зайдите в панель управления сайтом. Нажмите кнопку «Сканирование» и выберите пункт «Файлы Sitemap». Перейдите в раздел «Добавление/проверка файла Sitemap» и укажите адрес файла. Выберите «Проверить Sitemap».

• После проверки в этом же разделе нажмите на кнопку «Отправить файл Sitemap».

Теперь сайт индексируется в Google. Помните, что индексация материалов сайтов поисковиком не означает продвижение. Для того чтобы попасть в топ выдачи придется приложить гораздо больше усилий. Об эффективной поисковой оптимизации читайте в наших статьях с хештегом SEO.

Как проверить, что сайт проиндексирован

Базовый способ – посмотреть данные на обзорной странице Search Console. Там будут представлены все сводные данные на основе ключевых показателей, в том числе – статус индексирования. В Search Console также доступен Отчет об индексировании и Отчет о файлах Sitemap. Если вы видите рост количества ошибок, связанных с индексированием, своевременно исправляйте их, так как ошибки влияют на результаты поисковой оптимизации.

Второй вариант проверки – вручную с помощью поискового оператора «site:». Введите в поисковую строку команду: site:[url_сайта], чтобы получить данные о количестве проиндексированных страниц.

В автоматическом режиме можно выполнить проверку с помощь плагинов и букмарклетов – закладок браузера.

Также можно установить специальные сервисы для проверки индексации сайта. 

Возможные проблемы при индексации

Возможны две ситуации, при которых Google не проиндексирует ваш сайт:

• В случае проблем с сервером. Вы увидите сообщение о том, что хостинг не отвечает на запросы системы, и не сможете выполнить процедуру. В этом случае повторите попытку позже, когда сайт снова заработает. Если проблемы с хостингом возникают систематически, подумайте о смене провайдера. Отсутствие ошибок на сайтах и стабильная их работа учитывается алгоритмами поисковых систем при ранжировании в выдаче. Кроме того, вряд ли вы захотите потерять клиентов из-за неработающего сайта.

• При попадании под санкции Google. В этой ситуации появится сообщение о том, что адрес сайта запрещен к добавлению на индексацию. Санкции могут быть разными, и выданы по разным причинам. Если вы уверены, что не сделали ничего плохого за время владения сайтом, возможно, санкции были наложены в тот период, когда им управлял предыдущий собственник. Поэтому очень важно проверять сайты на бан поисковиков перед тем, как покупать их. Если вы узнали о санкциях по факту, можно попробовать узнать причину на форуме Google. Но для того, чтобы быстро пройти индексацию сайта, проще развивать проект на другом домене.

Быстрая индексация в Google

Чтобы не ждать, пока робот поисковой системы зайдет на сайт и проиндексирует новые страницы, можно ускорить процесс и прибегнуть к нескольким эффективным способам:

• Через панель веб-мастера Google. В разделе «Сканировать» выберите пункт «Посмотреть как Googlebot». Вставьте адрес новой страницы в соответствующее поле без адреса самого сайта — то есть удалить из URL эту часть. Нажмите кнопку «Сканировать», а по завершении процесса – кнопку «Добавить в индекс». Появление сканированной страницы в индексе займет от нескольких минут до получаса. Единственный недостаток такого способа заключается в том, что его необходимо выполнять вручную. Если вам нужно проиндексировать в Google сразу несколько страниц, это потребует времени.

• С использованием файла Sitemap.xml. Он определяет скорость индексации новых страниц, поэтому ссылки на них нужно добавлять сразу же. Так роботы будут находить их быстрее. Рекомендуем использовать динамический Sitemap.XML, а не обновлять его вручную после каждой корректировки сайта.

• С помощью оптимизации файла robots.txt. Этот файл позволяет задать поисковым роботам Google директивы, в соответствии с которыми они могут проиндексировать содержимое сайта. На скорость процесса особенно влияет директива Disallow. Она определяет, какие файлы, веб-страницы и разделы не нужно индексировать и благодаря этому роботы быстрее доходят до новых страниц.

• С помощью социальных сетей и RSS-канала. Можно ускорить индексацию сайта или нового контента, если опубликовать ссылки на него в социальных сетях. Добавьте на страницы кнопки соцсетей, чтобы посетители могли делиться вашими материалами в своих профилях и наращивать ссылочную массу. Создайте RSS-канал и добавляйте в него ссылки на новые страницы. С точки зрения пользователей, этот формат распространения информации устаревает, однако для поисковых систем он все еще является хорошим источником сведений о появлении нового материала на сайте.

Индексация сайта в Google – не самая сложная задача. Однако после индексации стоит заняться продвижением, а это уже требует комплексной и продолжительной работы.

Материал подготовила Светлана Сирвида-Льорентэ.

Как быстро проиндексировать страницы чужих сайтов. И зачем? || Блог Megaindex.com

Есть разные способы для ускорения индексации страниц сайта, к которому есть доступ. Но как проиндексировать страницы, которые размещены на сторонних сайтах?

Для каких целей следует проводить индексацию таких страниц? Почему не стоит публиковать страницы в общий доступ до индексации?

Рассмотрим тему и приведем разные варианты решения задачи по индексации, включая бесплатные методы.

Зачем индексировать страницы на сторонних сайтах?

Страницы сторонних сайтов следует добавлять в поисковую выдачу исходя из разных задач по поисковой оптимизации. Главные задачи заключаются в следующем:

• Индексация внешних ссылок, которые размещены на сторонних сайтах с целью улучшения внешнего ссылочного профиля;
• Индексация страницы с упоминанием о бренде на сайте средства массовой информации с целью вывода страницы в быстровыдачу;
• Подготовка к сбору данных о поведенческих факторах до начала маркетинговых активностей по раскрутке страницы.

Еще индексация страниц сторонних сайтов используется в самых разных сценариях при использовании черных методов раскрутки. Примеры:

• Индексация внешних ссылок, которые размещаются на верхних уровнях, при использовании многоуровневой стратегии по оптимизации внешнего ссылочного профиля. В таком случае множество ссылок размещается на не авторитетных сайтах, поэтому требуется индексация;
• Индексация пустых страниц на конкурентных сайтах, которые возвращают код ответа 200 с целью поисковой пессимизации сайтов.

Рекомендованный материал в блоге MegaIndex на тему поисковой пессимизации сайтов по ссылке далее — Как конкуренты могут понизить позиции Вашего сайта в поисковой выдаче посредством негативного SEO.

Индексация требуется и в случае если ссылки размещены на авторитетном сайте, но в архиве. Цена таких ссылок меньше, но потребуется провести комплекс мер по индексации.

Рассмотрим чуть подробнее главные сценарии.

Индексация внешних ссылок на сторонних сайтах

Зачастую покупные ссылки индексируются со значительной задержкой после размещения. В таком случае есть смысл ускорить индексацию, ведь при размещении внешних ссылок следует придерживаться определенной стратегии, иначе могут быть проблемы с раскруткой. Примеры проблем:

• Ссылки не индексируется поисковой системой, а значит статический и анкорные веса не передаются, и толку от таких ссылок нет;
• Ссылки индексируются с лагом, что нарушает стратегию и увеличивает риск ссылочного взрыва.

Будет оптимально, если индексация будет происходить моментально после размещение страницы с ссылкой.

Подготовка к сбору данных о поведенческих факторах

В большинстве случаев страница сначала готовиться, затем публикуется на сайте и сразу начинается процесс раскрутки. Так происходит практически на всех сайтах.

Данный подход является не оптимальным по ряду причин. Главные причины такие:

• Сторонние сайты могут присвоить авторство контента;
• Авторитетные сайты могут практически сразу скопировать текст, и затем разместить контент на своем сайте. В таком случае поисковая система будет выводить страницу авторитетного сайта выше;
• С высокой вероятностью на начальном этапе не будет проведен учет поведенческих факторов.

В результате страница будет ранжироваться в органической выдаче поисковой системы хуже, чем могла бы.

Правильные действие такие:

• Добавить страницу на сайт с доступом по ссылке;
• Проиндексировать страницу;
• Далее публиковать страницу на сайте.

Риски есть и в случае, когда речь идет про внешние страницы. Если ссылка размещается на внешнем авторитетном ресурсе, значит такая страница способна привлечь дополнительный трафик из поисковой выдачи и/или новостных сервисов. В таком случае страницу следует проиндексировать сразу.

Нет точной информации о механики учета поведенческих факторов, но с высокой вероятностью данные начинают заполняться в базе поисковой системы после попадания адреса страницы в индекс.

Итак, оптимально, если индексация страницы будет происходить сразу после размещения на сайте. Как так сделать?

Разберемся с данным вопросом далее.

Как проиндексировать страницы сторонних сайтов?

Первый способ. Индексация через private blog network сайты Google Search Console.

Для индексации следует выполнить такие действия:

• Зарегистрировать доменные имена для выполнения задач по индексации;
• Добавить доменные имена в Google Search Console;
• Создать страницы;
• Разместить на созданных страницах 301-редиректы, которые требуется проиндексировать;
• Направить страницы на индексацию через REQUEST INDEXING.

Индексация выполнится быстро в случае, если редирект установлен на ранее проиндексированной странице. Поэтому страницы на сателлитах следует индексировать заранее. В случае с новой страницей на неавторитетном сайте процесс будет длиться дольше.

Регистрировать доменные имена следует у надежных регистраторов с поддержкой Privacy Whois и аккредитацией ICANN. Регистратор с аккредитацией ICANN, регистрирующий полный спектр доменных имен — reg.com.

Подобные действия лучше проводить с virtual private network серверов, дабы не сайты подпадали под санкции.

Второй способ. Страница будет проиндексирована, если по адресу страницы есть трафик. Данный способ позволяет добавить страницы в индекс используя задания на таких сервисах как ProfitTask.

В данном случае правильным решением будет установка на сайт Google Analytics и Yandex.Metrica. Страница сайта будет добавлена в индекс поисковой системы после попадания данных о посещаемости в данные системы статистики.

Третий способ. Страница будет проиндексирована, если на страницу есть ссылки из социальных сетей. Подход через размещение ссылок в социальных сетях является наиболее белым способом по добавлению страниц в поисковую выдачу. Вместе с индексацией улучшаются и социальные сигналы, которые влияет на ранжирования в органической выдаче поисковой системы. Как реализовать такой способ на практике? Через сеть страниц в социальных сетях или через специальные сервисы. Например, через сервис GetSosial.

Ссылка на сервис — GetSocial.

Как происходит индексация страниц сайта? Сначала страницы сканируются. Страница сайта может быть просканирована, но не проиндексирована. До попадания страницы в поисковую выдачу выполняется ряд действий. Весь процесс выглядит так.

Как узнать проиндексирована страница или нет?

Проверить проиндексирована ли страница в Google и Yandex можно используя поисковый оператор site и уточнение по поиску.

Например, для сайта indexoid:

site:indexoid.com

Будет показан список всех проиндексированных страниц. Далее в инструментах поиска выберите данные об индексации за определенный период времени.

Выводы

Итак, что делать? Страницы следует добавлять в индекс поисковой системы сразу после публикации.

На продвигаемом сайте следует реализовать механизм добавления контента на сайт с доступом по ссылке. На MegaIndex выглядит так:

Страницы сторонних сайтов следует добавлять в поисковую выдачу любым доступным способом. Примеры расписаны выше. В случае с применением 301-го редиректа страницы на сателлитах следует готовить заранее. Зачем так делать? Переобход проводится быстрее.

Начинать маркетинговые активности следует после появления страницы в поисковой выдаче.

Какие способы используете вы? Есть ли у вас вопросы или мнение по теме? Напишите в комментариях.

Как проверить индексацию сайта в Google и Яндекс

Индексация сайта (поисковая индексация сайта) – сканирование сайта и добавление его в базу данных (индекс поисковых систем).

Это если совсем просто и коротко. А если подробнее?

Важно! Если вы хотите получать аудиторию из поисковых систем – сайт должен быть открытым для индексации.

Поисковые системы типа Яндекса и Google сканируют страницы сайтов, чтобы классифицировать их и добавить в Индекс – базу данных. Поисковые роботы – пауки или краулеры – собирают информацию о тексте, видео, изображениях и другом доступном для сканирования контенте. Робот проверяет его на соответствие требованиям, отсеивает спам и добавляет полезный контент в свою базу.

База данных поисковику нужна, чтобы выдавать пользователям верные результаты по запросам. Чем более релевантен сайт запросу, тем выше в списке результатов он находится, а значит и получает больше переходов. 

В данной статье мы разберемся с самыми важными вопросами, связанными с индексацией сайта и страниц: 

• Как узнать, проиндексирован ли сайт;
• Как проверить количество проиндексированных страниц сайта в поисковых системах Гугл и Яндекс;
• Как проверить индексацию страниц;
• Как ускорить индексацию сайта в Яндексе и Google;
• Какие поисковые операторы можно использовать;
• Как использовать robots.txt и sitemap.xml для быстрой индексации страниц.

Чтобы узнать подробно, как индексировать страницы или сайт и можно ли ускорить индексацию, пройдите бесплатные SEO курсы 2021 для начинающих от Сергея Кокшарова. Курс уже достуен в Академии Коллаборатора.

Чтобы проиндексировать сайт в Яндексе и Гугле, воспользуйтесь инструментами для вебмастеров: Яндекс.Вебмастером и Search Console. Поисковики индексируют сайты с разной скоростью. Например, Яндекс может «рассматривать» обычный сайт от недели до месяца, а вот Google сделает это максимум за неделю. Но чтобы не ждать, можно самому повлиять на скорость индексации.

Чтобы добавить сайт в Яндекс.Вебмастер:

1. Войдите в свой аккаунт на Яндексе или зарегистрируйте новый.
2. Перейдите на сервис Вебмастер и впишите в поле адрес главной страницы вашего сайта.
3. Подтвердите, что вы владелец сайта. Сервис предложит вам добавить мета-тег в код страницы, либо другой способ подтверждения.
4. Робот проверит наличие мета-тега, добавит сайт и покажет информацию о нем.
5. Установите и привяжите к аккаунту Вебмастера Яндекс.Метрику, чтобы краулер использовал более точные данные.

После добавления сайта в панель вебмастера — ожидайте его индексации. Отслеживать статус индексации страниц вы можете в следующем отчете:

Проверка индексации страниц в Яндекс.Вебмастере

Чтобы добавить сайта в Google Search Console:

1. Перейдите на страницу Search Console и войдите в свой аккаунт или зарегистрируйтесь.
2. Добавьте сайт в систему.
3. Подтвердите права на сайт.

Когда сайт проиндексируется, вы увидите отчет. 

Проверка индексации страниц в Google

В основном пользователи рунета отдают предпочтение Google и Яндексу, но и несколько других поисковиков должны знать о вашем сайте, небольшие объемы трафика вы также можете получать оттуда.

Mail.ru имеет свой кабинет для вебмастеров. Вы можете добавить туда сайт по тому же принципу. 

Рамблер пользуется теми же данными, которые собирает Яндекс, так что вам не понадобятся дополнительные настройки.

Yahoo и Bing имеют общий кабинет для вебмастеров, с тех пор как два поисковика объединились. Вам нужно зарегистрироваться, после чего перейти в настройки вебмастера и добавить адрес сайта. После откроется страница, где нужно добавить сведения о сайте. Пройдет несколько недель, прежде чем информация о сайте начнет отображаться.

• частоты обновления контента;
• внутренних и внешних ссылок;
• наличия трафика на сайт с других источников;
• технической оптимизации сайта;
• корректной настройки CMS системы.

Да, рано или поздно роботы сами найдут ваш сайт и проиндексируют его, но ждать можно долго. Помимо ручного добавления сайта в систему поиска, существуют другие рекомендации.

Как ускорить индексацию в поисковых системах:

Главная рекомендация для ускорения индексации: создайте sitemap.xml на вашем сайте и добавьте его в Google Search Console и в Яндекс.Вебмастер.

Файл robots. txt хранится в корневом каталоге сайта, он может быть только один. Это текстовый файл, в который записывают правила для каждого отдельного поискового бота или для всех сразу. Правилами можно «спрятать» от роботов технические страницы, сделать акцент на важных и т.д.

Проверить файл можно прямо в Search Console и Яндекс.Вебмастере. 

У пауков ограниченное время на посещение сайта (краулинговый бюджет), и если дать ему обрабатывать все подряд страницы, то он может не успеть проиндексировать самые важные, «застряв» на технических.

Например, если у вас интернет-магазин, в robots.txt стоит закрыть от индексации внутренний поиск, корзины покупателей. Подробнее о работе с файлом можно прочесть в справке Google.

Sitemap.xml – карта сайта, куда нужно добавить все страницы, которые нужно проиндексировать. Карта поможет определить, где находятся страницы и частоту их обновления, приоритетность в структуре.

1. Необходимо создать карту сайта.  
2. Указать в карте сайту правила индексации страниц: дату обновления страниц, приоритет страниц и другие параметры. 
3. Добачить карту сайта в панели для вебмастеров Google Search Console и Яндекс.Вебмастер.  

Файл обычно располагается по адресу https://domain.com/sitemap.xml. 

Карта сайта выглядит примерно вот так:

В файле используются специальные теги XML:

• <url></url> – обозначает начало и конец блока страницы;
• <code></loc> – указывает адрес страницы;
• <lastmod></lastmod> – указывает дату последнего обновления страницы;
• <code><priority> – указывает приоритет страницы;
• <changefreq></changefreq> – указывает частоту обновления страницы с помощью:
  • never – никогда;
  • yearly – раз в год;
  • monthly – каждый месяц;
  • weekly – каждую неделю;
  • daily – каждый день;
  • hourly – каждый час.

Для больших сайтов имеет смысл создать несколько карт.

Внутренняя перелинковка – это ссылки на другие страницы вашего сайта. С ее помощью вы формируете структуру, которая помогает пользователям ориентироваться на сайте. 

Внтрення перелинковка ускоряет индексацию страниц, так как роботы сами проходят по ссылкам и проверяют их. Роботы сканируют сначала главную страницу и материалы с высокой приоритетностью. Грамотная перелинковка направит роботов на нужные страницы и значительно ускорит индексацию новых материалов.

Главные рекомендации по перелинковке:

1. Не делайте страницы с глубоким уровнем вложенности; идеальный вариант, это чтобы к любой странице сайта можно было добраться в 3 клика с главной страницы.
2. Используйте принцип “Википедии” – активно ставьте ссылки внутри статей и других страниц.

1. Избегайте одиноких страниц, на которые не ссылаются другие страницы.

Если кто-то ссылается на ваш сайт, значит ему доверяют. Чем больше внешних ссылок (бэклинков) на ваш сайт, тем больше вероятность получить внимание поискового бота. О том, как покупать ссылки для продвижения сайта, мы писали ранее. А если вы только разбираетесь в основах линкбилдинга, советуем почитать статью и посмотреть видео-урок, что такое линкбилдинг.  

Чаще остальных ресурсов боты сканируют соцсети и новостные порталы, ведь они обновляются чуть ли не каждую секунду. Ссылки с них на ваш сайт сработают лучше всего.

Сайты с самой высокой скоростью сканирования ссылок:

1. Twitter,
2. Facebook,
3. Вконтакте.

Яндекс больше любит связку ВК + Twitter. Попробуйте также размещать ссылки на тематических форумах. Чем больше пользователи будут взаимодействовать с постом со ссылкой и самой ссылкой, тем быстрее краулеры обратят на нее внимание.

Постоянно следите за тем, какие появляются внешние ссылки. Узнайте, как проверить обратные ссылки на сайт, как посмотреть внешние ссылки конкурента, какие есть бесплатные и платные сервисы.  

Есть несколько способов проверить, как проверить индексацию сайта или отдельной страницы в поисковых системах. 

С помощью поисковых операторов можно проверить индексацию сайта, количество страниц в индексе, индексацию отдельной страницы. С помощью поисковых операторов можно проверить количество проиндексированных страниц любого сайта, что очень важно при анализе сайтов конкурентов. 

1. site: — оператор для проверки индексации сайта в поисковых системах Яндекс или Google. Введите в строку поиска текст «site:[адрес вашего сайта]«, чтобы узнать количество индексируемых страниц.

Количество проиндексированных страниц в Google

Количество проиндексированных страниц в Яндексе

Обратите внимание! Если количество проиндексированных страниц в поисковых системах Гугл и Яндекс сильно отличается, это может говорить о проблемах на сайте, о санкциях поисковых систем.  

2. ulr: — оператор для проверки индексации страницы в поисковой системе Яндекс. Введите в строку поиска «ulr:[адрес проверяемой страницы]«, чтобы узнать, проиндексирована ли страница. 

 

Проверяем индексацию страницы в Яндексе

3. inulr: — оператор для проверки индексации страницы в поисковой системе Google. Введите в строку поиска «inulr:[адрес проверяемой страницы]«, чтобы узнать, проиндексирована ли эта страница. 

Многие SEO-специалисты пользуются плагинами и расширениями для проверки индексации, например RDS Bar. Его можно установить как расширение в браузер и проверить, открыта ли конкретная страница для индексации. Также RDS Bar позволяет проверить метатеги сайта, ИКС, узнать, нет ли запрета на индексацию текста или ссылок на странице, узнать другие важные параметры сайта или отдельных страниц.    

На скриншоте — плагин RDS bar для Google Chrome

Второй популярный плагин — Seo Magic — также показывает количество страниц в индексе Яндекса и Google. При нажатии на интересующую цифру открывается выдача поисковой системы.

Также популярны автоматические сервисы, которые массово собирают данные об индексации, такие как Netpeak Spider . Он может просканировать весь сайт, собрать все страницы. А Netpeak Checker выдаст сведения об индексации, информацию об ошибках и порекомендует, как от них избавиться. Софтина платная.

Бесплатный сервис PR-CY проверит, сколько страниц проиндексировано в посиковых системах Гугл и Яндекс.

Проверить индексацию страниц можно и в панелях вебмастеров Google и Яндекс.

Вы можете проверить: 

• количество проиндексированных страниц;
• динику индексации страниц поисковыми страницами;
• страницы, которые исключены из поиска;
• причины, почему страницы исключены из поиска.

Для Google зайдите в Search Console и на вкладке «Обзор» выберете график «Покрытие». График отображает разными цветами количество страниц без ошибок, с ошибками. Можно рассмотреть, какие ошибки мешают индексации. Новую страницу или исправленную можно отправить на индексацию кнопкой «Запросить индексирование».

В Яндекс.Вебмастер переходите на «Индексирование сайта», затем на «Страницы в поиске», где вы увидите количество страниц в поиске. 

Сайт или отдельные страницы могут не индексироваться поисковыми системами по ряду причин.

1. Поисковик еще не знает о сайте или странице. Прошло мало времени с момента появления страницы. Стоит подождать минимум две недели, чтобы сайт проиндексировался. Если сайт редко обновляется и на него нет внешних ссылок, поисковой бот просто не сможет узнать о нем.

2. Некоторые разделы закрыты для пауков. Это может происходить по желанию владельца сайта через robots.txt. Также возможно ваш сайт находится в черном списке – он может быть под санкциями или распространять вирусы.

3. Техническая ошибка на странице или сайте. Возможные ошибки:

• некорректные HTTP-заголовки;
• некорректные редиректы;
• неверно указанная кодировка, которую робот увидит как набор бессмысленных символов;
• ошибки сканирования, на которые указывают сами поисковики в панелях для вебмастеров;
• отсутствие или некорректная настройка sitemap.xml.

4. Плохое качество документов. Неуникальный контент, внутренние дубли, малый объем уникального текста, шаблонность в документах раздела, медленная скорость загрузки.

Чтобы проиндексировать новую страницу сайта или отправить на переиндексацию страницу, которую вы изменили, воспользуйтесь инструментами вебмастера Search Console и Яндекс.Вебмастер. 

1. В Google Search Console перейдите в раздел «Проверка URL».

2. Введите страницу, которую нужно проверить и отправить на переиндексацию.

3. Нажимайте на кнопку «Запросить индексирование». 

Данный инструмент также подходит для проверки индексации страниц своего сайта. 

1. В Яндекс.Вебмастере перейдите в раздел Индексация -> Переобзод страниц

2. Добавите страницу, которую нужно проиндексировать.

3. Нажмите кнопку «Отправить».

Дневной лимит — 210 страниц (вкючая поддомены и поддомены).

Через файл robots.txt можно запретить индексацию страниц или всего сайта для конкретного поисковика или для всех сразу, используя директиву Disallow:

Если хотите закрыть конкретные разделы, укажите их:

Disallow: /news

Иногда Google игнорирует такой запрет, проверьте это через кабинет вебмастера. Если страницы все еще индексируются, переходите к следующему способу.

С помощью метатега Robots можно не дать роботам просканировать контент и закрыть текст от индексации. Для этого нужно в раздел <head> страницы добавить строку:

<noindex>[текст]</noindex>

Закрыть всю страницу от индексации можно, добавив строку

<meta name="robots" content="none"/>

Перед закрытием сайта от индексации желательно проверить методы в панелях вебмастеров. 

Если вы понимаете принцип индексации и для чего она нужна, вы легко сможете правильно настроить сайт для поисковиков. Корректно настройте в robots.txt и карту сайта, избавьтесь от технических ошибок и позаботьтесь о качественном контенте, чтобы поисковики высоко ценили ваш сайт.

Остались вопросы? Задавайте их в комментариях😀

Ускорение индексации сайта поисковыми системами: подробная инструкция

Перед тем, как поисковики включат статьи и товары с продвигаемого вами сайта в выдачу по запросам пользователей, страницы должны пройти через процесс индексации. Что такое индексация сайта? Она заключается в обходе ресурса поисковыми роботами. Они представляют собой специальные программы для посещения сайтов. Их задача заключается в считывании контента. Впоследствии найденные тексты будут добавлены в базу данных поисковой системы (ПС). Задача этой базы — обрабатывать и хранить текстовые материалы и другой контент всех проиндексированных сайтов. От скорости и полноты проведения индексации зависит широта представления сайта в поисковой выдаче, высота занимаемой позиции и, в конечном итоге — количество посетителей.

О том, как правильно настроить индексацию в Яндекс и Google рассказываем в этой инструкции.

Какую информацию собирают роботы

Индексация сайта в поисковых системах — это больше, чем просто копирование информации с ваших страниц в базу поисковой машины. Для того, чтобы в результаты поиска попадала только важная для пользователя информация, роботы осуществляют фильтрацию содержимого, удаляя все лишнее: рекламу, элементы навигации и одинаковые для всех страниц блоки. Также выясняется структура документа (разделы, подзаголовки), проводится семантический разбор текста, для определения его релевантности тем или иным запросам.

У роботов есть и специализация: некоторые отвечают за текстовый контент для основной и «быстрой» выдачи (как правило — для новостных сайтов), другие — за картинки для разделов ПС (Яндекс.Картинки и аналогичный сервис у Гугла). Существуют и специализированные алгоритмы для слежения за ссылочным профилем, оценки мобильных версий сайтов и медиа-контента.

Как страницы попадают в индекс

Перед тем как начнется индексация в Гугл, Яндекс и других поисковиках, каждая ПС должна получить сведения о появлении нового ресурса. О существовании страницы можно узнать несколькими способами:

1. Перейдя по ссылкам на просматриваемом сайте. Чем больше исходящих ссылок ведут на документ, тем больше шансов, что он будет проиндексирован в приоритетном порядке.
2. XML-документ со специальной разметкой — карта сайта, является источником ссылок, с которым будут сверяться роботы при планировании обхода.
3. Информация полученная из систем аналитики Яндекс Метрика и Google Analytics также учитывается при планировании обходов. При подключении этого функционала данные о странице будут отправляться напрямую в сервис индексации как только кто-то откроет на сайте неизвестный ранее ПС документ. Единственное требование к нему — он обязательно должен содержать код отслеживания.
4. Автор сайта может самостоятельно отправить страницу на индексацию, воспользовавшись специальной формой в панели управления сервисами ПС.

Управление индексацией

Несмотря на то, что индексация страниц полностью автоматизирована, от усилий вебмастера зависит полнота и скорость этого процесса.

Добавление сайта

Первый шаг всегда заключается в добавлении сайта в специализированные сервисы ПС. Вебмастер — для Яндекс и Search Console для Гугл.

Добавление сайта в Вебмастер выполняется в несколько простых шагов:

Если сайт работает по HTTPS, указывайте домен вместе с протоколом:

Второй этап — подтверждение прав на домен. Необходимо воспользоваться одним из предложенных способов. Самый простой из них — скачать html-файл и разместить его в корне сайта.

Индексация сайта в Яндекс начнется в течение нескольких дней после добавления домена. Первые результаты, включая данные о количестве проиндексированных страниц, станут доступны после следующего обновления поисковой базы.

Для Google Search Console процесс выглядит схожим образом:

Единственное отличие заключается в возможности добавить сразу все ресурсы на домене (мобильные версии сайтов, все протоколы и поддомены), но для этого нужно иметь доступ к редактированию записей NS-сервера, что возможно далеко не у каждого хостера.

Файл robots.txt

Этот простой по своей структуре файл позволяет управлять поведением роботов. С его помощью можно как исключить сайт из поиска и полностью запретить индексацию сайта, так и повысить результативность индексирования и продвижения, ограничив доступ роботам к тем страницам, где нет ценного контента.

В рассматриваемом примере все системные папки движка Joomla закрыты от индексирования с помощью конструкции Disallow. Чтобы явно разрешить доступ к какому либо элементу, нужно использовать Allow.

У файла есть и другие интересные особенности. Например, такие, как закрыть сайт от индексации только в определенной поисковой системе. Для этого используется специальная конструкция User-agent. Если после нее указать наименование конкретного робота — Googlebot или Yandex, то все последующие инструкции будут предназначены только для указанной ПС. Как заблокировать сайт в гугле и разрешить индексацию только в Yandex? Достаточно использовать следующую конструкцию

User-agent: Googlebot

Disallow: /

User-agent: Yandex

Allow: /

User-agent позволяет лучше соответствовать требованиям поисковых систем. Тот же Google предлагает разрешить его ботам индексировать файлы скриптов и стилей. Самый простой способ сделать это — добавить всего две лишние строчки в robots.txt

User-agent: Googlebot

Allow: *.css

Allow: *.js

Важно! В зависимости от используемой CMS нужно определить страницы, которые наверняка будут содержать дубли уже размещенной информации (результаты поиска, например) или никогда не обзаведутся полезным для пользователя контентом (страницы входа, регистрации). Доступ к этим страницам нужно запретить в robots.txt, чтобы улучшить результаты индексирования.

Проверить отредактированный файл на правильный синтаксис и узнать, разрешен ли конкретный URL можно в Яндекс Вебмастере:

Noindex и Nofollow

Использование мета-тэгов для ссылок позволяет указывать роботам, что делать на конкретной странице, и стоит ли проводить индексацию сайта в Google, Яндекс и любой другой ПС, которая поддерживает работу с такими тэгами.

• INDEX, FOLLOW — содержимое страницы можно добавлять в индекс, также необходимо перейти по всем ссылкам;
• INDEX, NOFOLLOW — страница должна попасть в индекс, но переходить по ссылкам не нужно;
• NOINDEX, FOLLOW — страница не попадет в индекс, но робот пройдет по всем ссылкам на ней;
• NOINDEX, NOFOLLOW — вся страница целиком и ссылки на ней запрещены к индексированию и переходам.

Популярные CMS позволяют устанавливать такие тэги для отдельных документов, категорий и пунктов меню. Для отдельных ссылок также можно использовать noindex. В этом случае роботы будут обязаны не включать в базы содержимое целевого документа.

Карта сайта

Чтобы индексация сайта в Гугл, а также в Яндексе прошла максимально быстро, нужно указать поисковым системам ссылки на наиболее важный контент. Конечно, можно делать это вручную (об этом — ниже), но постоянное появление новых страниц на продвигаемом ресурсе приведет к необходимости ручного добавления страниц, что не слишком удобно. Карта сайта — решение этой проблемы. Она представляет собой XML документ с определенной разметкой, который размещен по известному ПС адресу. Роботы посещают этот адрес и моментально получают информацию о появлении новых ссылок на вашем сайте.

Для подготовки карты сайта лучше воспользоваться специализированным расширением для CMS, которое будет автоматически обновлять содержание XML при создании новых статей и разделов. Структура сайта допускает указание периода обновления для различных страниц и приоритета в индексации. Оба эти параметра носят рекомендательный характер, поскольку ПС самостоятельно измеряют временные интервалы между датами изменения и посещают чаще те страницы, где они фактически происходят быстрее.

Как ускорить индексацию сайта в Яндексе? Нужно добавить карту сайта через панель Вебмастера и дождаться обхода роботом ссылок.

В Google Search Console также есть специализированный раздел:

Не лишним будет и указание ссылки на Sitemap в файле robots. txt с помощью конструкции:

Sitemap: https://vash_sait/путь_к_sitemap.xml

Поисковики могут и проигнорировать эту запись, полагаясь только на информацию из файлов, добавленных вручную через панели управления.

Учет страниц из Метрики

Подключение счетчика Метрики и его связь с сервисом ЯндексВебмастер позволяет значительно ускорить процесс индексации сайта в Яндекс благодаря автоматической передачи сведений о страницах из кода счетчика.

При установке на сайт кода Google Analytics (GA) также можно передавать сведения о новых страницах в Search Console. Для этого нужно войти под своей учетной записью и связать сервисы, перейдя по ссылке в уведомлении.

Важно! Предложенный метод позволяет как ускорить индексацию в Яндексе и Гугле, так и значительно замедлить этот процесс. Все зависит от настройки файла robots.txt и особенностей работы вашей CMS. Если система управления контентом генерирует большое число динамических страниц (фильтры товаров в интернет-магазинах, результаты поиска) при выполнении запросов пользователей, то перед подключением обхода по данным Метрики нужно обязательно исключить такие страницы из индексации.

Добавление URL вручную

Для ускорения индексации наиболее важных страниц сайта можно добавлять их в индекс вручную. В Search Console нужно вставить ссылку в верхнее поле поиска и дождаться получения информации из индекса:

Если страница еще не попала в базу, можно запросить индексирование, нажав соответствующую кнопку на странице с результатами поиска. Таким образом можно также проверить индексацию сайта в гугле, любой его страницы или документа.

В ЯндексВебмастер есть аналогичный функционал. С его помощью можно не только узнавать статус индексации, но добавлять страницы в обход вручную.

Достаточно указать список URL и отправить их на переобход. Даже если адрес пока неизвестен роботу, он посетит указанные ссылки.

Как проверить индексацию сайта

Чтобы проверить индексацию страницы в Яндексе нужно перейти в раздел «Проверить статус URL» и указать адреса, по которым нужно получить информацию из индекса.

Добавление страницы в список отслеживаемых позволит получить уведомление о том, что страница добавлена индекс и поиск, а также о важных изменениях в ее статусе (редирект, ошибка 404).

Проверка индексации страницы в Яндексе может быть проведена и с помощью запроса на странице поиска, но этот метод позволяет получить информацию только о тех из них, которые уже попали в поисковую базу. для этого используется конструкция

site:ваш_домен.ru

Метод одинаково работает в ПС Яндекс и Google.

Проверка индексации страницы в Google возможна через поиск Search Console. Единственный минус такого решения: URL придется вставлять по одному. У Яндекс допускается загрузка списков из 20 ссылок.

Методы ускорения индексации

Как проиндексировать сайт в Гугл и Яндекс, чтобы процесс происходил быстро, а в индекс попадали только те страницы, которые впоследствии будут учитываться в поиске? Нужно придерживаться нескольких простых правил:

1. Настроить индексацию в robots.txt таким образом, чтобы исключить дублирование страниц и исключить из обхода все служебные разделы сайта, не содержащие информации для пользователей.
2. С помощью тегов Noindex и Nofollow закрыть конкретные ссылки и документы, которые не должны попасть в базу поиска.
3. Сформировать и подключить карту сайта.
4. Оптимизировать структуру каталогов и упростить навигацию, чтобы путь до самых важных документов был как можно ближе к корню сайта.
5. Организовать внутреннюю перелиновку статей таким образом, чтобы путь робота по ссылкам не содержал коротких петель (два документа ссылаются только друг на друга) и охватывал максимально возможное количество ценных для пользователей материалов.

Все эти действия можно провести самостоятельно, но чтобы избежать ошибок, которые пагубно скажутся как на скорости индексации ресурса, так и на его представленности в результатах поиска лучше доверить их профессионалам. Узнать о стоимости услуг оптимизации сайтов можно по этой ссылке.

Как заставить Google быстрее индексировать мой сайт? (Как отправить URL)

Индексация сайта может показаться довольно пассивной задачей.

Просто напишите контент, оптимизируйте его для поисковых систем, загрузите на свой сайт и просто дождитесь волшебства, верно?

Не обязательно.

Как можно быстрее разместить свой контент в Google? Как заставить Google индексировать обновленные страницы?

Процесс индексации Google очень эффективен, но несовершенен.

И учитывая, что невозможно достичь ваших маркетинговых целей, если ваши страницы не проиндексированы, индексацию не следует оставлять на волю случая.

К счастью, вы можете предпринять множество шагов, чтобы помочь Google быстро и точно проиндексировать ваши страницы.

В этом посте я расскажу о девяти способах более активного подхода к индексации своего сайта и, как следствие, улучшения видимости вашего сайта в Интернете.

Вы узнаете, как заставить Google проиндексировать ваш веб-сайт и как проверить свой рейтинг в индексе Google.

Но сначала давайте сделаем шаг назад и посмотрим, что такое индексация , и почему она играет такую ​​важную роль в результатах вашего цифрового маркетинга.

Что такое индексация Google?

Прежде чем мы перейдем к способам ускорения процесса индексации, важно понять, что именно такое индексация.

Что такое веб-индекс?

В своей основной форме index — это список информации. Задолго до Интернета индексы существовали во многих формах, например, алфавитные указатели в конце книг.

Таким образом, веб-индекс — это база данных информации в Интернете.

Поисковые системы используют эти базы данных для хранения миллиардов страниц информации. Таким образом, когда вы используете поисковую систему, вы на самом деле не ищите все, что существует в Интернете.

Вы ищете в индексе этой поисковой системы, где хранятся страницы и информация.

Боты или «пауки» сканируют новые страницы в Интернете и сохраняют их в индексе, основанном на их тематике, релевантности, авторитете и многом другом.

Как работает индекс Google?

У каждой поисковой системы есть свой индекс. Но поскольку Google является крупнейшей поисковой системой в мире и на которой большинство маркетологов сосредотачивают свои стратегии SEO, мы собираемся сосредоточиться на их.

В 2016 году Google утверждал, что знает более 130 триллионов отдельных страниц.

Сегодня он не указывает точно, сколько страниц находится в его индексе, но говорит, что его алгоритм поиска сортирует « сотни миллиардов » страниц в своем индексе, чтобы предоставить полезные и релевантные результаты.

Как Google индексирует Интернет?

Для создания библиотеки с миллиардами страниц требуются мощные инструменты.

Самые важные из этих инструментов называются пауками. Эти автоматизированные боты представляют собой автоматизированные браузеры, которые «ползают» с сайта на сайт , переходя по ссылкам для поиска контента.

Вся информация, которую сканируют эти пауки, хранится в индексе Google.

Затем, когда пользователь выполняет поиск, алгоритм поиска Google сортирует свою гигантскую базу данных, чтобы найти наиболее релевантные страницы.

Получение информации из этой установленной базы данных (вместо попытки поиска информации в реальном времени) позволяет поисковой системе быстро и эффективно предоставлять результаты.

Пауки Google постоянно ищут новую информацию и обновляют свою базу данных.

Несмотря на то, что результаты берутся из сохраненного источника, цель поисковой системы — всегда предоставлять актуальные результаты.

Поэтому, когда вы добавляете новый контент, в ваших интересах, чтобы он был проиндексирован как можно быстрее.

Почему это важно, если ваш сайт быстро индексируется в Google?

Учитывая, что пауки Google постоянно ищут информацию, вы можете задаться вопросом, зачем вам нужно прилагать дополнительные усилия, чтобы помочь им.

В конце концов, если они уже сканируют, они все равно не найдут ваш сайт?

Дело в том, что они могли бы.

Но если ваш сайт относительно новый или его не сканируют часто, проиндексирование вашего нового содержания может занять несколько дней или даже недель.

Это вызывает задержки в видимости поисковой системы — что является одним из наиболее важных факторов успеха вашего цифрового маркетинга.

Вы можете привлекать трафик из самых разных источников, но если учесть, что 51% всего отслеживаемого трафика веб-сайтов поступает из обычного поиска, невозможно отрицать, что ваше присутствие в поиске может принести вам успех или помешать ему.

[tweet_box design = ”default”] Обычный поиск может серьезно повлиять на ваш трафик, но вы не увидите этот трафик, пока ваш сайт не будет проиндексирован.[/ tweet_box]

Индексация необходима для создания рейтингов, привлечения трафика и достижения ваших целей для вашего сайта.

Google, вероятно, проиндексирует ваш веб-сайт в любом случае, если вы специально не предприняли никаких действий по отказу от индексации (о чем мы поговорим позже).

Но вы хотите, чтобы ваш сайт быстро проиндексировался .

Чем раньше будут проиндексированы ваши страницы, тем быстрее они начнут конкурировать за первые места в результатах поиска и занять их.

Учтите, что только 5,7% вновь опубликованных страниц попадают в первую десятку результатов в течение года.

Совершенно очевидно, что высокие позиции не происходят в одночасье. Эти данные показывают, что Google предпочитает уже существующий контент.

Фактически, средний рейтинг первой страницы составляет за два года , а средняя страница на первой позиции составляет почти трехлетней давности .

Нельзя сказать, что новые страницы , конечно, не могут иметь высокий рейтинг .Но быстро попасть на первое место — редкость.

Фактически, из всех страниц, занимающих первое место, менее двух процентов были моложе года.

Чем раньше будут проиндексированы ваши страницы, тем быстрее они начнут соревноваться за первые места.

Это особенно важно для новых веб-сайтов. Если у Google нет записей о сайте, его пауки не могут просто переходить по внутренним ссылкам для поиска новых страниц.

Таким образом, в то время как другие сайты продолжают добавлять новые страницы в свою базу данных, ваш сайт может быть проигнорирован.

То же самое верно и при переключении доменных имен. Даже если вы перенесете на все своего контента, Google будет рассматривать ваш новый домен как совершенно новый сайт.

Например, когда Podia (ранее Coach) недавно переименовали и приняли новое имя, они также изменили свое доменное имя, чтобы отразить это. Их услуги остались в основном такими же, как и содержание их сайтов.

Но Google не может сразу распознать, когда сайт просто переключается на новое место.

Таким образом, даже несмотря на то, что клиент мог определить, что это был именно тот сайт, который он искал, ему необходимо было предпринять шаги, чтобы гарантировать, что Google сможет привлечь туда этих пользователей.

Google помогает в этом процессе, позволяя веб-мастерам, которые меняют домен, заполнить форму «Смена адреса».

Но помимо этого, вы можете предпринять множество других шагов, чтобы убедиться, что ваш контент индексируется как можно быстрее и эффективнее.

Как заставить Google индексировать мой сайт с помощью этих инструментов SEO: Google Search Console и Yoast

Правильная индексация вашего сайта может показаться сложной задачей.

И правда в том, что иногда это может быть, но для упрощения процесса доступно множество инструментов, многие из которых чрезвычайно удобны для пользователя.

Существует множество опций, которые предлагают расширенные функции и возможности, но два наиболее важных и широко используемых — это Google Search Console и Yoast SEO.

Google Search Console — это бесплатный инструмент, который помогает отслеживать присутствие вашего сайта в индексе Google и результатах поиска.Вы можете использовать его, чтобы убедиться, что Google может получить доступ к вашему контенту, отправить новый контент, а также отслеживать и решать любые проблемы.

Yoast SEO — это бесплатный плагин WordPress, предназначенный для простой оптимизации сайтов для поиска. Если вы управляете сайтом WordPress, это один из лучших инструментов, который вы можете использовать для улучшения своего присутствия в поиске, и на данный момент он в основном считается важным инструментом.

Если вы уже знакомы с этими инструментами, не стесняйтесь переходить к следующему разделу с девятью советами, которые вы можете использовать для улучшения индексации.

Google Search Console

Google Search Console (ранее известная как Google Webmaster Tools) — один из самых ценных инструментов SEO, имеющихся в вашем распоряжении, и он совершенно бесплатный.

Вы можете использовать его, чтобы следить за многими различными аспектами видимости вашего поиска. Но ради индексации вы можете использовать его для отслеживания сканирования, ошибок индекса и проблем безопасности.

Если у вас еще нет учетной записи, перейдите в Search Console и войдите в свою учетную запись Google.

Если у вас уже есть учетная запись Google Analytics, зарегистрируйтесь с тем же адресом электронной почты. Это упростит процесс и упростит хранение всей вашей информации в одном месте.

Создав учетную запись, нажмите кнопку «Добавить ресурс» в правом верхнем углу.

Введите свое доменное имя и нажмите «Добавить».

После этого вы попадете на страницу с инструкциями по подтверждению вашего права собственности на собственность.

Если вы выберете подтверждение с помощью загрузки файла HTML, вы увидите файл HTML, доступный для загрузки.

Загрузите файл подтверждения, затем используйте FTP, чтобы загрузить его в корневой каталог.

После того, как вы загрузили файл, вы можете проверить его, открыв целевой URL в браузере. Если вы видите имя файла в окне браузера, загрузка завершена. Вернитесь в Search Console и нажмите «Подтвердить».

После завершения этого шага вы сможете получить доступ к данным Search Console. Однако важно отметить, что вам необходимо оставить файл подтверждения на своем сайте.Даже после первоначальной проверки этот файл показывает Google, что вы являетесь правильным владельцем.

Если у вас возникли проблемы с подтверждением своего сайта с помощью файла HTML — или если вы просто предпочитаете проверить другой способ — вы можете использовать несколько других вариантов.

Если у вас уже есть учетная запись Google Analytics, это простой вариант. Убедитесь, что вы вошли в систему с той же учетной записью Google, которую используете для Analytics, выберите «Google Analytics» и нажмите «Подтвердить».

После аутентификации своей учетной записи вы можете ознакомиться с несколькими основными функциями.

Установите предпочтительный домен

Одно из самых простых исправлений, которое вы вносите в целях индексации, — это установка предпочтительного домена.

Пользователи могут зайти на ваш сайт, набрав ваше доменное имя с или без WWW перед ним. Это может показаться не проблемой, но Google рассматривает WWW и не WWW версии вашего домена как разные сайты.

Если вы не сообщите Google, что это ваш сайт (и какой из них вы предпочитаете), возможно, одно и то же содержание индексируется по разным URL-адресам.Это может вызвать некоторые раздражающие, но легко устранимые проблемы.

Установка предпочтительного домена сообщает Google, какую версию вы предпочитаете, и гарантирует, что все ваши страницы проиндексированы в правильном месте.

К счастью, это тоже несложный процесс.

Во-первых, добавьте все версии вашего домена, выполнив тот же процесс, что и выше. Убедитесь, что вы добавили как WWW, так и не WWW версии, а также их версии HTTP и HTTPS, если у вас включен HTTPS.

Это означает, что многие владельцы сайтов имеют четыре свойства для одного сайта:

• http: // www.yourdomain.com
• https://www.yourdomain.com
• http://yourdomain.com
• https://yourdomain.com

После добавления всех версий своего домена щелкните значок шестеренки и выберите «Настройки сайта».

Вверху страницы у вас будет возможность определить, какую версию вашего сайта вы хотите, чтобы Google распознал.

Таким образом, если другой сайт ссылается на WWW-версию вашего сайта, но вы предпочитаете версию, отличную от WWW, Google будет знать, что ссылка должна соответствовать той версии, которую вы предпочитаете.

Версия, которую вы используете, по существу субъективна.

Владельцы сайтов обсуждали года и , что лучше, но нет никаких указаний на то, что выбор одной версии лучше другой для целей SEO. Важно просто выбрать одно — неважно, какой именно.

После того, как вы указали предпочтительный домен, вы можете начать использовать многие функции, доступные в Search Console. Но для целей этого поста наиболее важными являются те, которые перечислены в разделах «Индекс Google» и «Сканирование» в левом меню.

Статус индекса

Отчет о статусе индекса показывает, сколько ваших URL-адресов Google проиндексировал за последний год.

Этот отчет позволяет легко определить, находит ли и индексирует ли Google ваши страницы.

Вы также можете проверить вкладку «Дополнительно», чтобы узнать, сколько страниц вашего сайта было заблокировано вашим файлом robots.txt (о чем мы поговорим позже).

Если вы намеренно запрещаете Google индексировать определенные страницы, эта вкладка сообщит вам, что вы правильно настроили блоки.

И если вы, , не хотите, чтобы блокировал индексирование Google определенных страниц, эта вкладка сообщит вам, если есть проблема.

Удалить URL-адреса

Если вы когда-нибудь захотите временно удалить принадлежащий вам URL-адрес из результатов поиска, вы можете сделать это с помощью функции «Удалить URL-адреса».

Это не приведет к окончательному удалению страницы из результатов поиска, но может быть полезно для страниц, которые находятся в стадии разработки или на которые вы не хотите привлекать трафик по какой-либо другой причине.

Ошибки сканирования

Отчеты об ошибках сканирования дают вам краткий обзор любых проблем с сайтом или URL за последние 90 дней.

Это упрощает быстрое выявление и устранение проблем, которые могут препятствовать индексации и ранжированию ваших страниц.

Статистика сканирования

Отчет «Статистика сканирования» показывает активность Google на вашем сайте за предыдущий 90-дневный период, включая страницы, просканированные за день, количество загружаемых килобайт в день и время, потраченное на загрузку страницы.

График страниц в день вверху, пожалуй, самый важный из трех, поскольку он показывает, как часто Google сканирует и индексирует ваш контент.

Чем больше Google просканирует ваш сайт, тем лучше.

Хотя вы не можете напрямую повлиять на скорость сканирования вашего сайта, вы можете с уверенностью предположить, что если Google сканирует ваш сайт с постоянной скоростью, ваш сайт в хорошем состоянии.

Если вы видите внезапное падение, это может указывать на проблему, например, неработающие ссылки или неподдерживаемый контент.Отслеживание этой частоты может помочь вам определить потенциальные проблемы до того, как они превратятся в настоящие.

Йоаст

Если ваш сайт работает на WordPress, Yoast SEO — важный плагин. Он разработан, чтобы упростить поисковую оптимизацию для пользователей WordPress и не требует каких-либо технических знаний или навыков программирования.

Yoast предлагает платную премиум-версию с расширенными функциями, но ее бесплатная версия имеет множество функций для большинства пользователей. Все советы, которые мы упоминаем в этом посте, можно выполнить в бесплатной версии.

Если вы еще не установили его, войдите в свою панель управления WordPress и выберите «Плагины».

Выберите «Добавить новый», затем найдите Yoast в строке поиска.

Нажмите кнопку «Установить сейчас», чтобы загрузить и установить плагин, затем следуйте инструкциям, чтобы активировать его.

Yoast упрощает многие этапы оптимизации вашего сайта.

Например, будет автоматически анализировать ваше внутреннее SEO для каждого нового сообщения, которое вы добавляете, и поможет вам определить проблемы с тегом заголовка, метаописанием и удобочитаемостью.

Есть тонны функций, которые стоит изучить , но для индексации наиболее важным является модуль XML Sitemaps.

Щелкните значок Yoast в строке меню, затем выберите «XML Sitemaps».

Затем переключите функцию карты сайта XML на «Включено».

Параметры по умолчанию подходят для большинства пользователей, но если у вас есть определенные предпочтения относительно того, как настроен ваш, вы можете установить их здесь.

Затем нажмите «Сохранить изменения».”

Поздравляю! У вас есть карта сайта. Продолжайте читать, чтобы узнать, что с этим делать.

Как проиндексировать ваш сайт в Google

1. Создайте карту сайта

Как следует из названия, карта сайта — это карта вашего сайта. Это документ в формате XML, который сообщает поисковым роботам, куда им можно, а что нельзя.

Сканер просматривает эту страницу, чтобы узнать все о вашем веб-сайте — насколько он велик, какие страницы наиболее важны и где находится новый контент.Карта сайта в формате XML — важнейший первый ингредиент успешной индексации.

Пауки умны, но им действительно нужна карта.

Почему?

Без карты сайта сканирование может занять много времени — до 24 часов, чтобы проиндексировать новое сообщение в блоге или веб-сайт.

Это слишком долго.

С помощью карты сайта вы можете сократить это время до нескольких минут.

Верно: ваш веб-сайт, блог или новая страница могут быть проиндексированы Google менее чем за час.

Ваша карта сайта также сообщает Google, как часто нужно искать изменения и новые страницы на вашем сайте. Если вы не обновляете или не добавляете новый контент часто, возможно, ваш сайт не будет сканироваться каждые несколько часов.

Но если вы добавляете несколько сообщений в блог каждую неделю, регулярно добавляете страницы с новыми продуктами или публикуете срочные новостные статьи, вы захотите сообщить Google, чтобы он сканировал и индексировал ваш сайт чаще.

К счастью, создать карту сайта зачастую проще, чем звуки.Если вы используете указанный выше плагин Yoast, вы можете перейти к следующему шагу.

А если нет, есть несколько других инструментов, которые могут сканировать ваш сайт и давать аналогичные результаты.

Кричащая лягушка

Один из лучших вариантов для создания карты сайта XML — Screaming Frog .

Чтобы использовать Screaming Frog, сначала загрузите их инструмент SEO Spider.

Если на вашем сайте меньше 500 страниц, это совершенно бесплатно.

Если ваш сайт больше, вам нужно будет купить лицензию, которая может окупиться, если учесть время, которое потребуется на ручной поиск и перечисление 500+ URL-адресов.

После того, как вы установили программу , введите свой URL-адрес в поле «Введите URL-адрес для паука» и нажмите «Пуск».

Затем нажмите «Карты сайта»> «Создать XML-карту сайта».

Перед тем, как создать карту сайта, вы можете настроить несколько параметров.

Во-первых, вам нужно определить, какие страницы вы хотите включить, а какие — исключить.

По умолчанию будут включены только страницы с ответом OK при сканировании «200», поэтому вам не нужно беспокоиться о перенаправлениях или неработающих ссылках.

Тем не менее, вы можете прокрутить список страниц и найти дублированный контент. Например, в вашей карте сайта нет необходимости иметь как WWW, так и не WWW версии URL.

Вы можете решить эту проблему, щелкнув правой кнопкой мыши версию, которую хотите удалить, и выбрав «Удалить».

Если ваши страницы различаются по важности, вы можете выбрать установку значений приоритета для разных URL-адресов. Ваши URL-адреса могут находиться в диапазоне от 0,0 до 1,0, значение по умолчанию — 0,5.

Это сообщает Google, какие страницы являются наиболее важными, чтобы они могли сканировать и индексировать эти страницы чаще.

Важно отметить, однако, что установка значений приоритета , а не не влияет на ваш рейтинг, так что вам не будет никакой пользы от попытки обыгрывать систему здесь.

Затем вы можете сообщить Google, как часто каждая страница вашего сайта может изменяться. Это сигнализирует поисковым роботам, что им следует сосредоточиться на сканировании часто обновляемых страниц.

Установка частоты изменения сотен страниц может быть утомительной, но вы можете использовать функцию «Вычислить из последнего измененного заголовка» Screaming Frog, чтобы автоматизировать процесс.

Это означает, что если заголовок страницы был изменен в предыдущие 24 часа, частота его изменения будет ежедневной, а если она не обновлялась в последнее время, она будет установлена ​​ежемесячно.

Наконец, вы можете определить, хотите ли вы включать изображения в карту сайта. Если выбран параметр «Включить изображения», все изображения на вашем сайте будут включены по умолчанию.

Вы можете исключить изображения, такие как ваш логотип и значки социальных сетей, но включить фотографии продуктов и другую важную графику.

По завершении настройки нажмите «Далее», чтобы сгенерировать карту сайта. Сохраните его на свой компьютер и дважды проверьте размер.

Карта сайта не может содержать более 50 000 URL-адресов или иметь размер более 50 МБ, поэтому, если ваш файл нарушает любое из этих правил, он может быть разделен на два отдельных файла.

Но если вы получите файл подходящего размера, загрузите его в корневую папку вашего сайта через FTP-клиент.

Тогда переходите к следующему шагу!

Google XML Sitemaps

Google XML Sitemaps — еще один бесплатный плагин для сайтов WordPress.Если вы не используете Yoast, это простой способ создать карту сайта с настраиваемыми параметрами, похожими на те, которые вы можете установить с помощью Screaming Frog.

После того, как вы установили свои предпочтения, вы можете найти свою карту сайта по URL-адресу, указанному в верхней части страницы. В большинстве случаев это будет просто http://yourdomain.com/sitemap.xml.

2. Отправьте карту сайта в Google Search Console

Теперь, когда вы создали карту сайта, вам нужно отправить ее в Search Console.

Это позволяет Google узнать обо всех страницах, которые вы хотите проиндексировать, и может помочь их поисковым роботам найти самые важные из них.

На главной странице Search Console выберите предпочитаемую версию своего домена. Затем на левой боковой панели нажмите «Конфигурация сайта», затем «Карты сайта».

Нажмите кнопку «Добавить / протестировать карту сайта» в правом верхнем углу и введите URL-адрес своей карты сайта.

В большинстве случаев URL вашей карты сайта будет просто http://yoururl.com/sitemap.xml.

Если вы используете плагин WordPress, URL-адрес будет в настройках плагина. В Yoast файл обычно называется sitemap_index.xml.

Вы можете проверить местоположение своей карты сайта, введя ее в свой браузер. Если у вас правильный URL-адрес, он должен выглядеть примерно так:

После того, как вы нажмете «Отправить», вы увидите, что ваш файл Sitemap находится в состоянии ожидания.

После утверждения вы сможете увидеть количество отправленных вами страниц и количество проиндексированных.

Это может дать вам хорошее представление о , какой объем информации о вашем сайте хранит Google.

Однако важно понимать, что создание и отправка карты сайта — это не разовый процесс.

По мере того, как вы продолжаете добавлять страницы и обновлять свой сайт, ваш сайт будет развиваться — и ваша карта сайта должна развиваться вместе с ней.

Это поможет вам быть уверенным, что у Google всегда будет обновленная версия того, как должен выглядеть ваш сайт, и он сможет сканировать и индексировать ваш сайт с максимальной эффективностью.

3. Создайте robots.txt

Хотя название «robots.txt» может показаться немного техническим и пугающим, сам файл на самом деле довольно прост.

Роботы.txt — это текстовый файл на вашем веб-сайте, который указывает поисковым системам, что индексировать, а что не индексировать.

По сути, это список команд для поискового робота, который сообщает ему, где он может и что не может перейти на ваш сайт.

Это самая первая остановка, которую делает паук в своем путешествии, чтобы проиндексировать ваш сайт. Если ваш robots.txt говорит: «Не индексируйте меня», то паук будет двигаться дальше.

Как вы уже догадались, очень важно, чтобы ваш robots.txt давал Google разрешение на сканирование сайта.Это значение по умолчанию.

Тем не менее, если на вашем веб-сайте есть разделы, которые вы не хотите отображать в результатах поиска, вы можете настроить это в файле robots.txt.

Как Google объясняет :

Мы предлагаем инструменты для веб-мастеров, которые позволяют владельцам сайтов детально выбирать, как Google сканирует их сайт: они могут предоставить подробные инструкции о том, как обрабатывать страницы на своих сайтах, могут запросить повторное сканирование или могут полностью отказаться от сканирования с помощью файла под названием «роботы». .текст».

Чем больше у вас страниц на вашем веб-сайте и чем больше вы открываете их до индекса, тем лучше будет ваша индексация.

Тем не менее, контроль над вашей индексацией важен — и именно здесь ваш файл robots.txt становится важным.

Как создать файл robots.txt

Файлы Robots.txt — это простые текстовые файлы. Это упрощает создание их в стандартном текстовом редакторе вашего компьютера, таком как Блокнот (для пользователей Windows) и TextEdit (для пользователей Mac).

Это , а не , включая такие программы, как Microsoft Word, которые могут добавлять дополнительное форматирование, искажающее ваш файл.

Прежде чем начать, проверьте свой FTP, чтобы увидеть, есть ли у вас уже файл robots.txt. Если вы это сделаете, он должен храниться в вашей корневой папке как что-то вроде http://yourdomain.com/robots.txt.

Если да, загрузите его и используйте в качестве отправной точки.

Если нет, ничего страшного! Создать файл robots.txt , даже с нуля, довольно просто.

Во-первых, вам необходимо ознакомиться с несколькими основными элементами синтаксиса robots.txt.

У Google есть полезный ресурс robots.txt для этого:

Чтобы создать файл, вам нужно знать несколько элементов:

• User-agent : бот, к
применяется следующее правило
• Disallow : URL-адрес, который вы хотите заблокировать
• Разрешить : URL-путь в заблокированном родительском каталоге, который нужно разблокировать

Также важно отметить, что благодаря звездочке команда User-agent применяется ко всем поисковым роботам.Поэтому, если вы создаете правила с помощью «User agent: *», они будут применяться к сканерам из Google, Bing и всем остальным ботам, которые сканируют ваш сайт.

Если вы хотите, чтобы весь ваш сайт был открыт для сканирования, ваш файл robots.txt будет выглядеть так:

Правило применяется ко всем сканерам, и ничего не блокируется.

Если вы хотите создать более сложный файл robots.txt, вы можете использовать генератор, например SEObook .

Просто выберите ботов, к которым будет применяться каждое правило, затем введите файлы или каталоги, которые вы хотите запретить или разрешить.

Затем вы можете скопировать и вставить созданный контент внизу страницы в свой файл robots.txt.

SEObook также дает вам возможность добавить карту сайта. Раньше это считалось оптимальной практикой, но в нем нет необходимости, если вы отправили карту сайта в Google Search Console.

Тем не менее, это не повредит — так что не стесняйтесь включать его, если хотите.

Зачем блокировать определенные страницы?

Блокирование индексирования определенных разделов вашего сайта — одна из важнейших задач файла robots.txt файл.

Но зачем кому-то это нужно?

Короткий ответ заключается в том, что не каждая страница вашего сайта представляет ценность для читателей. Таким образом, даже если эти страницы были проиндексированы , они, скорее всего, никогда не ранжируются в результатах поиска.

Например, если ваш сайт работает на WordPress, он имеет множество подпапок, содержащих плагины и другую информацию.

Эти файлы важны для работы вашего сайта, но не помогают посетителям. Поэтому, если вы хотите предотвратить их сканирование и индексирование, ваш файл robots.txt может выглядеть примерно , как это :

Вы также можете запретить свои страницы с благодарностью или подтверждением, страницы оформления заказа и любые другие страницы, на которые пользователю не имеет смысла переходить непосредственно из поисковой системы.

Это предохраняет поисковые системы от индексации информации, которая вряд ли когда-либо будет обработана в результате.

Robots.txt и ограничения сканирования

Запрет доступа к определенным страницам и подпапкам также может помочь ботам более эффективно сканировать ваш сайт.

Google ограничивает частоту сканирования сайтов, чтобы избежать перегрузки серверов. Вы также можете установить собственную частоту сканирования в Search Console.

Это означает, что он ограничен в том, сколько времени он может проводить на вашем сайте и сколько страниц он может сканировать за это время.

Запрет определенных страниц помогает сканерам сосредоточиться на содержании, которое вы действительно хотите проиндексировать, — и может улучшить частоту сканирования ваших ценных страниц в поисках новой информации.

4. Создайте внутренние ссылки

Один из наиболее эффективных способов поощрения сканирования и повышения индексации вашего веб-сайта — использование внутренних ссылок.

Пути, по которым пауки проходят через Интернет, образуются ссылками. Когда одна страница ссылается на другую страницу, паук следует по этому пути.

Убедитесь, что на вашем собственном веб-сайте есть ссылки на все ваши самые важные страницы.

Обычно это происходит естественным образом, если у вас есть хорошо организованный веб-сайт.Например, эта стандартная архитектура веб-сайта ресторана ссылается на внутренние страницы с основной навигацией.

Структура сайта часто упускается из виду, но может иметь большое влияние на множество различных частей вашей стратегии SEO.

Пользовательский опыт

С точки зрения пользователя, логическая архитектура сайта и навигация значительно упрощают просмотр вашего сайта.

Заранее спланируйте иерархию, а затем логически организуйте навигацию.Пользователю не нужно гадать, где находится информация, которую он ищет — она ​​должна быть интуитивно понятной на основе ваших категорий и ссылок.

Также рекомендуется сделать структуру сайта максимально простой. Сложные мегаменю могут выглядеть необычно и иногда необходимы для очень больших сайтов, но если они вам не нужны, не используйте их.

Вместо этого придерживайтесь простой и понятной настройки, которая сразу делает очевидным, где пользователю нужно щелкнуть, чтобы найти нужную информацию.

Гусеничные

Помимо пользователей-людей, логическая структура сайта облегчает поисковым роботам доступ к вашему контенту и его индексацию.

Хорошо спланированная архитектура сайта устанавливает иерархию между вашими страницами. Это помогает сканерам понять, какие страницы являются наиболее важными и как разные страницы связаны друг с другом.

Внутренние ссылки отправляют сканеров на другие страницы вашего сайта и помогают им находить новый контент

На каждой странице вашего сайта должны быть ссылки, указывающие на нее

Страницы концентратора контента

Если у вас много контента, вы можете создать «центральные страницы», чтобы помочь пользователям и поисковым системам более эффективно просматривать ваш сайт.

Эти страницы могут быть организованы по-разному, но по сути служат указателями вашей информации по определенным темам.

Вы можете создавать группы узловых страниц:

• Сообщения в блоге на похожие темы
• Похожие товары (если у вас есть сайт электронной торговли)
• Новости по теме (если вы управляете редакционным сайтом)

Эти страницы помогают Google определять релевантность отдельных страниц и их связь с другими страницами вашего сайта.

Кроме того, с точки зрения пользователя, он позволяет легко находить дополнительный контент, связанный с интересующими нас страницами.

Например,

TechCrunch имеет страницы категорий для определенных тем, о которых он часто пишет, например Internet of Things .

Если пользователь читает историю об Интернете вещей и хочет узнать больше, эта страница позволяет ему легко найти дополнительные статьи по этой теме.

И когда сканер увидит все эти страницы, сгруппированные вместе, он сможет определить, что у них похожий контент.

Эти типы узловых страниц могут быть чрезвычайно полезны. А если вы хотите добавить его на свой сайт, он может быть настолько простым или сложным, насколько вам нравится.

Если у вас есть опыт работы с HTML, вы можете жестко закодировать страницу (или страницы) с группами связанных ссылок. Делайте все возможное с форматированием или нет — решать вам.

Настоящая ценность заключается в создаваемых вами группировках и в той ценности, которую они предоставляют пользователям и поисковым роботам.

Независимо от того, какой формат вы выберете, обязательно продолжайте добавлять на свои центральные страницы с течением времени по мере добавления дополнительного контента.

Ссылки на новые страницы по мере их добавления помогут этим страницам быстрее индексироваться (и ранжироваться).

Ссылка на соответствующий контент на каждой странице

По мере того, как вы добавляете контент на свой сайт, темы, которые вы освещаете, обязательно должны совпадать.

Эти области пересечения предоставляют прекрасные возможности для добавления внутренних ссылок.

Например, если у вас есть сайт по личным финансам, вы можете написать сообщение с советами по улучшению кредитного рейтинга.

Если вы уже писали более общий пост о кредитном рейтинге, вы можете указать ссылку на него в качестве ресурса для читателей.

Хотя некоторые из ваших посетителей могут быть лояльными читателями, многие из них не прочитали все содержимое вашего сайта.

Направление к релевантной информации может помочь им узнать больше о теме и побудить их проводить больше времени на вашем сайте.

Если ваш сайт относительно невелик, определение релевантных страниц для ссылки — несложный процесс.

И если вы напишете весь контент самостоятельно, ваш мозг может даже служить в качестве живого индекса каждой страницы на сайте.

Но если у вас большой сайт с сотнями (или тысячами!) Статей и сообщений, может быть почти невозможно определить наиболее релевантные из них, на которые можно ссылаться в каждом новом создаваемом вами фрагменте контента.

Именно здесь становятся чрезвычайно полезными такие инструменты, как подключаемый модуль еще одного связанного сообщения или YARPP . После установки плагина вы можете использовать его для автоматического добавления ссылок на релевантный контент в свои сообщения и страницы.

Вы можете установить предпочтения для ссылок, включенных в зависимости от категорий и временного диапазона.

Так, например, если вы настраиваете это для своего блога о личных финансах, вы можете выбрать размещение сообщений, которые вы написали о кредите за последний год, в нижней части ваших новых сообщений о кредите .

Вы также можете определить, хотите ли вы включать простые, только текстовые ссылки или ссылки с изображениями-эскизами.

Оглавление

Многие пользователи не читают все содержимое страницы. Они попадают на страницу в поисках определенной информации, затем прокручивают и просматривают ее, пока не найдут ее.

Если они не могут найти на вашей странице то, что им нужно, они, скорее всего, вернутся к результатам поиска и выберут другой результат.

Чем проще вы сделаете им навигацию по вашему контенту, тем больше вероятность, что они останутся. Один из способов сделать это — создать оглавление.

Если у вас есть сайт WordPress, вы можете использовать плагин, например Easy Table of Contents , чтобы создать, как следует из названия, оглавление. (Без труда).

Просто установите плагин, определите типы страниц, на которых вы хотите, чтобы ваше оглавление отображалось, и настройте, где вы хотите, чтобы оно отображалось на странице.

Вы также можете настроить плагин на автоматическое создание оглавления, когда вы используете определенное количество заголовков, и разрешить пользователям переключать его видимость.

Добавление их на ваши страницы позволяет пользователям легко переходить к ключевым разделам или информации, а также дает вам возможность ссылаться на дополнительные ресурсы.

Ваши сообщения не могут служить исчерпывающим ресурсом для ваших читателей. Но есть большая вероятность, что контент, который вы написали в прошлом, имеет отношение к вашему новому контенту.

Включите ссылки на эти сообщения под оглавлением, чтобы показать вашим читателям, где можно найти дополнительную информацию, и улучшите вашу внутреннюю структуру ссылок в процессе.

Внутренняя ссылка Yoast

Если у вас Yoast Premium, вы можете использовать функции внутренних ссылок Yoast, чтобы упростить процесс добавления соответствующих ссылок к каждому из ваших сообщений.

Эта функция работает, анализируя известные слова в каждом сообщении, а затем предоставляет предложения по ссылкам на основе статей с похожими известными словами и содержанием.

В отличие от YARPP, эта функция не полностью автоматизирована. Вместо того, чтобы автоматически добавлять ссылки в конец ваших сообщений, он дает вам сокращенный список возможных вариантов.

Таким образом, вы можете выбрать те варианты, которые вам больше всего нравятся, а затем включить их в свой пост, как вы сочтете нужным.

Это экономит время, избавляя от необходимости возвращаться ко всем вашим старым сообщениям каждый раз, когда вы публикуете что-то новое и хотите включить соответствующие внутренние ссылки.

Это требует немного больше усилий, чем автоматический плагин, но в результате вы можете сделать ваши ссылки более естественными для вашего контента.

5. Зарабатывайте входящие ссылки

Хотя внутренние ссылки помогают поисковым роботам понять структуру вашего сайта и найти новые страницы, наиболее важными являются входящие ссылки или ссылки с других сайтов.

Когда другие веб-сайты ссылаются на ваш, это дает вашему сайту поддержку во многих отношениях.

Если у вас есть опыт работы с SEO, вы уже знаете, насколько важны ссылки для установления доверия и авторитета.

Чем больше у вас ссылок с надежных сайтов, тем более авторитетным вы будете выглядеть в глазах Google и тем выше вероятность того, что они высоко оценят ваш сайт.

И хотя это само по себе является причиной сосредоточиться на получении входящих ссылок, они также могут помочь вам быстрее проиндексировать ваш сайт.

Ссылки с других сайтов отправляют сканеры на ваши страницы. Поэтому, если другой сайт ссылается на одну из ваших новых страниц, эта страница, скорее всего, будет просканирована и проиндексирована гораздо раньше.

И хотя некоторые из этих ссылок могут возникать естественным образом, лучше использовать более активный подход.

Если вы можете минимизировать время между появлением нового контента на сайте и возвращением ссылок, вы улучшите скорость индексации этого нового контента.

Конечно, если у вас есть опыт построения ссылок, вы знаете, что получить ссылки часто легче сказать, чем сделать.

Но если вы заранее создадите стратегию продвижения, вы будете точно знать, что делать, когда появится новая публикация, и у вас будет гораздо больше шансов быстро проиндексировать эту страницу.

Синдикация контента

Если вы можете найти места для синдицирования вашего контента, это один из самых простых способов обеспечить аудиторию для каждой новой части контента, которую вы публикуете.

Syndication — это процесс повторной публикации вашего контента на других веб-сайтах с указанием вашего сайта.

В отличие от гостевой публикации, которая требует от вас создания оригинального содержания для чужого сайта, вы получаете вознаграждение в виде ссылки с гораздо меньшими усилиями.

Например, Personal Branding Blog объединяет все свои новые сообщения на специальную страницу на сайте Business2Community.

Это означает, что весь их контент сразу публикуется в двух местах.

Кроме того, внизу каждого сообщения есть ссылка на личный блог брендинга.

Конечно, синдикация может быть сложной. Если все сделано неправильно, это может вызвать проблемы с дублированием контента.

В некоторых случаях владельцы сайтов даже находят синдицированные версии своего контента выше их собственного сайта.

Но когда все сделано хорошо, может помочь вам расширить охват и заработать больше ссылок из более крупных публикаций.

Повторная публикация на носителе

Medium — чрезвычайно популярный сайт для публикации и чтения контента.

Это также отличное место для синдикации.

Хотя многие пользователи публикуют исключительно на платформе, вы также можете использовать ее для повторной публикации сообщений и статей на своем сайте. Medium также автоматически использует тег rel = canonical, поэтому вам не придется беспокоиться о дублировании контента

Это тоже просто: просто введите URL-адрес, по которому ваша статья была ранее опубликована, в Medium’s Import Tool , затем нажмите «Импорт».

При этом будет извлечена вся копия исходного сообщения, а также форматирование текста, заголовки, списки и ссылки.Это позволяет очень легко импортировать и публиковать сообщения.

Изображения не импортируются автоматически , поэтому вам придется добавлять их вручную. Если в исходном посте не было изображений, подумайте о добавлении некоторых перед публикацией!

На главной странице и страницах категорий

Medium отображаются популярные сообщения с изображением перед заголовком. Нельзя сказать, что не может получить результаты без изображения — но это, вероятно, будет намного сложнее.

Кроме того, если вы попадете на страницу категории, вы не хотите, чтобы ваш текстовый заголовок конкурировал за внимание со всеми этими изображениями.

Потратьте лишние десять минут, чтобы добавить несколько изображений в свой пост.

В конце концов, контент уже написан и импортирован, поэтому ваше время, потраченное на публикацию, скорее всего, в конечном итоге составит менее 15 минут

После импорта сообщения и добавления изображений у вас также есть возможность создать собственную постоянную ссылку.

Щелкните три точки справа от кнопки «Опубликовать», затем выберите «Пользовательский».

Затем вы можете добавить к своему сообщению до пяти соответствующих тегов.

Число рядом с каждым тегом показывает, сколько пользователей подписано на него. Таким образом, если вы выберете теги с большим количеством подписчиков, вы сможете значительно расширить охват и получить больше пользы от каждого публикуемого вами контента.

Добавить в справочники инфографики

Справочники раньше были огромной частью SEO. Размещение вашего сайта в как можно большем количестве случайных каталогов было эффективным способом повысить рейтинг и привлечь трафик.

К счастью, это уже не так.Термин «каталог» часто ассоциируется со спамом, неэффективной практикой — и это правильно.

Справочники инфографики являются исключением.

Visual.ly, например, позволяет пользователям отправлять графику в свою галерею визуального вдохновения

Если вы создаете инфографику для своего сайта, вы можете отправить ее на сайт и использовать исходную ссылку в качестве источника. Это требует очень небольшой работы для потенциального воздействия, которое вы можете получить.

Кроме того, учитывая, насколько трудоемким может быть создание инфографики, этот дополнительный шаг — отличный способ максимизировать отдачу от каждого из них.

Опубликовать в LinkedIn Pulse

Как и Medium, LinkedIn Pulse — это платформа, которая поощряет оригинальный контент, но также может использоваться для привлечения трафика на ваш сайт.

Если вы еще не публиковали на платформе, важно отметить, что статьи Pulse отделены от регулярных обновлений статуса.

Чуть ниже того места, где вы обычно вводите короткое обновление, нажмите «Написать статью».

Затем вы увидите полнотекстовый редактор с параметрами форматирования, мультимедийными возможностями и всем остальным, что вы ожидаете от платформы публикации.

Многие пользователи относятся к этой функции как к блогу и используют ее для публикации полностью оригинального контента.

Это, безусловно, неплохое использование платформы, особенно если учесть, что они получают письма непосредственно перед профессиональными контактами.

Но если вы хотите привлечь трафик к содержанию, которое вы уже опубликовали на своем сайте, вы можете использовать Pulse, чтобы поделиться отрывком, а затем добавить ссылку на полную версию.

Скопируйте и вставьте несколько первых разделов (или больше, в зависимости от длины сообщения).Обязательно включите информацию, которая достаточно интересна, чтобы читатели захотели дочитать статью до конца.

Затем включите ссылку на полную версию с призывом к действию, например «Нажмите, чтобы продолжить чтение» или «Подробнее!»

Эта стратегия позволяет вам воспользоваться преимуществами встроенной аудитории и охвата LinkedIn, в конечном итоге направляя трафик на ваш собственный сайт.

Пока ваши первые несколько абзацев четкие, это отличный способ быстро заработать читателей после публикации нового контента.

6. Поощряйте обмен в социальных сетях

Степень роли социальных сетей в SEO неясна.

Но что ясно и , так это то, что социальные платформы — это простой способ немедленно сообщить людям, что ваш новый контент существует.

Скопируйте и вставьте ссылку, добавьте несколько слов текста и вуаля — ваш контент будет доступен всему миру (или, по крайней мере, вашим подписчикам).

При совместном использовании ваших страниц в социальных сетях на них также отправляются поисковые роботы, которые могут помочь ускорить процесс индексации.

Платформы социальных сетей должны обязательно иметь место в вашей издательской стратегии. А если еще не сделали, начать легко.

Создание учетных записей на основных платформах

Если вы только начинаете работать с социальными сетями, варианты могут показаться немного подавляющими. Но, по крайней мере, вы должны быть представлены в Facebook и Twitter.

Другие платформы, которые вы используете, зависят от вашей отрасли и целевой аудитории.

Если вы, например, представляете компанию B2B, вам определенно захочется быть в LinkedIn.С другой стороны, если вы розничный торговец одеждой, ориентированный на людей 18–24 лет, вы, вероятно, добьетесь лучших результатов с помощью Instagram.

После того, как вы определились, на чем вы хотите сосредоточить свои усилия в социальных сетях, найдите время и создайте свой аккаунт или бизнес-страницу.

Например, на Facebook вы захотите включить всю свою контактную информацию, а также сведения о ваших услугах, миссии и истории.

У вас также должны быть фотография профиля и фотография на обложке, которые точно отражают ваш бренд.

Создание стратегии продвижения

После того, как ваши учетные записи будут запущены, вы должны создать подпрограмму социального обмена , чтобы обеспечить регулярную публикацию нового контента в своих учетных записях.

Один из лучших способов сделать это — использовать такой инструмент, как Buffer.

Вы можете создать расписание для всех случаев, когда вы хотите публиковать новый контент для каждой из ваших учетных записей в социальных сетях.

Затем вы можете добавить контент в свою очередь и автоматически поделиться им в заранее определенное время публикации.

Таким образом, вам никогда не придется беспокоиться о том, чтобы не забыть публиковать определенные обновления или делиться определенными ссылками в разное время дня или недели.

Кроме того, каждый раз, когда вы публикуете новую страницу, вы можете сразу же добавить ее в свою очередь.

Таким образом, независимо от того, в какое время он выйдет в эфир, он будет добавлен к вашему ранее существовавшему расписанию и предоставлен вашим подписчикам в ожидаемое время.

Когда вы установите такой уровень согласованности, ваши подписчики будут знать, чего ожидать, и начнут с нетерпением ждать возможности регулярно читать ваши новые статьи и сообщения в блогах.

С точки зрения индексации это также означает, что каждая новая страница, которую вы добавляете, будет доступна в течение нескольких дней после публикации.

Это отличный способ привлечь роботов на ваш сайт и повысить шансы на быструю индексацию.

Связь с влиятельными лицами

Всем нравится чувствовать себя важными.

И хотя ваша главная цель с контентом должна состоять в том, чтобы приносить пользу вашим читателям, вы можете делать это таким образом, чтобы подчеркивать других людей и их мнения.

Один из лучших способов сделать это — использовать сводные сообщения или сообщения, в которых сочетаются цитаты, советы, прогнозы и другая информация от множества соответствующих людей.

Например, этот огромный список маркетинговых прогнозов видеоконтента включает в себя информацию от 87 опытных маркетологов.

Это дает тонны ценности для читателей, которые хотят учиться у лучших, поскольку все это исходит от уважаемых маркетологов, многие из которых хорошо известны в отрасли.

Кроме того, он дает этим маркетологам возможность продемонстрировать свой опыт — так что вы можете быть уверены, что почти все они поделились им в своих социальных сетях, как только он будет запущен.

Это, вероятно, привело к тонн дополнительного трафика для сайта. Такой трафик может оказаться огромным для индексации.

[tweet_box design = ”default”] Итак, если вы ищете идею для публикации в блоге, которая почти гарантированно привлечет у вас новых подписчиков в социальных сетях и отправит поисковые роботы на ваш сайт, обзорный пост — отличный вариант.[/ tweet_box]

Общайтесь с влиятельными лицами, спрашивайте их совета или идеи по определенной теме, а затем скомпилируйте их в ресурс от ваших читателей.

После публикации обязательно обратитесь к этим влиятельным лицам, чтобы сообщить им об этом. Во многих случаях они будут гордиться тем, что продемонстрируют свой опыт и поделятся публикацией со всеми своими подписчиками.

Рассмотрите возможность использования платных опций

Ссылки для обмена — это эффективный способ сообщить вашим подписчикам, что вы опубликовали новый контент.

Кроме того, вы также можете использовать свои учетные записи в социальных сетях для расширения аудитории с помощью платного продвижения постов.

На всех основных социальных платформах есть опции для «увеличения» контента, чтобы расширить охват.

Таким образом, вместо того, чтобы создавать традиционную рекламу, вы платите за то, чтобы контент, которым вы делитесь со своими подписчиками, был доступен большему количеству людей.

Большинство платформ также делают этот процесс довольно простым.

Например, на Facebook вы можете заранее определить, сколько вы готовы потратить на продвижение своего поста и как долго вы хотите, чтобы продвижение продолжалось.

Затем вы определяете свою аудиторию на основе множества вариантов таргетинга. Если вы хотите, чтобы все было просто, вы можете придерживаться стандартного таргетинга по возрасту, полу и местоположению.

Но если у вас есть более четкое представление о том, кого вы хотите охватить, вы также можете выбрать свою аудиторию на основе таких факторов, как интересы, должности и поведение в Интернете.

По сути, цель здесь — выбрать аудиторию, которая, вероятно, будет заинтересована в чтении статьи, сообщения в блоге или другого контента, которым вы делитесь.

Вы не обязательно пытаетесь продавать этим людям, но они должны быть частью вашей целевой аудитории.

(И если люди, которые, вероятно, будут заинтересованы в вашем контенте , не ваша целевая аудитория … возможно, пришло время скорректировать вашу стратегию.)

После того, как вы выбрали аудиторию, вы можете начинать продвигать свой пост. Если вы никогда раньше не продвигали публикацию, вы можете быть удивлены тем влиянием, которое она может оказать при относительно низкой цене.

Если вы решите сделать это регулярной частью своей стратегии, вы также можете использовать такие инструменты, как AdEspresso , чтобы автоматизировать процесс и сделать его еще проще.

Вы можете настроить свою учетную запись Facebook на автоматический запуск рекламных акций для сообщений, соответствующих определенным критериям.

Так, например, если вы делитесь статьей и она получает 50 лайков органически, вы можете с уверенностью считать, что это эффективный контент для вашего бизнеса.

Это тот контент, в который стоит инвестировать часть своего рекламного бюджета.

В AdEspresso вы можете установить эти параметры заранее — так что каждый раз, когда ссылка органически получает определенное количество лайков, вы автоматически тратите определенную сумму денег, продвигая ее еще большему количеству пользователей.

Это поможет вам получить максимальную отдачу от каждой части контента и направить свой рекламный бюджет на те части, которые принесут вам наибольшую отдачу от вложенных средств.

7. Создайте блог

Алгоритм Google отдает приоритет пользователям « свежих, недавних результатов поиска ».

Владельцы сайтов постоянно публикуют новые страницы и обмениваются новой информацией, а поисковая система фокусируется на том, чтобы пользователи получали самую последнюю версию нужной информации.

Регулярное добавление нового содержания на ваш сайт показывает Google, что ваш сайт предоставляет свежую информацию. Лучший способ сделать это — вести блог.

Блог создает массу контента, которую пауки могут сканировать, а Google — индексировать. Чем больше высококачественного контента вы размещаете в Интернете, тем больше у вас индексации и тем больше возможностей для SEO вы зарабатываете.

У веб-сайтов с блогом в среднем на 434% больше проиндексированных страниц .

У этих компаний также на 97% больше входящих ссылок и на 67% больше потенциальных клиентов.

Итак, если вы еще не ведете блог, его создание может помочь вашей маркетинговой стратегии несколькими способами.

А если вы не знаете, с чего начать, вы можете использовать уже имеющееся содержание блога, чтобы проанализировать, что работает.

Таким образом, вы не просто выбираете темы, которые, по вашему мнению, ваша аудитория может быть интересна , — вы применяете метод сбора данных для создания интересных и эффективных сообщений в блогах.

Исследование конкурентов

Независимо от вашей отрасли или ниши, вероятно, уже сотни (если не тысячи) людей пишут об этом в блоги.

Вы можете использовать эти блоги для исследования конкурентов.

Существует множество инструментов, которые помогут вам определить , какой контент наиболее эффективен для других сайтов.

Один из лучших — Buzzsumo , показывает наиболее эффективный контент для любого домена или темы на основе репостов в социальных сетях.

Если вы знаете, какого конкурента вы хотите исследовать, введите его доменное имя в строку поиска. Затем вы увидите список их страниц, которыми чаще всего пользуются, с подсчетом количества публикаций для Facebook, LinkedIn, Twitter и Pinterest.

Вы также можете выполнить поиск по определенной теме, и вы увидите наиболее распространенный контент по этой теме с различных сайтов.

Если вы еще не знаете, кто ваши конкуренты в блоге, это отличный способ узнать, кто публикует контент в вашей отрасли.

Затем вы можете более подробно изучить каждый из блогов, которые получают много просмотров и репостов.

Если вы уже знаете, кто ваши конкуренты (или если вы просто хотите следить за тем, когда ваша компания упоминается в Интернете), вы можете настроить Google Alerts для отслеживания определенных слов и фраз.

Введите фразу, которую вы хотите отслеживать, а затем установите настройки предупреждений для времени, источников, языка и частоты.

Эти оповещения будут отправляться прямо на вашу электронную почту, чтобы вы могли легко быть в курсе, когда публикуется новый контент по теме, которую вы отслеживаете.

Если вы хотите глубже изучить конкурентные исследования, вы можете использовать тонны из других полезных инструментов .

Для многих из них требуется подписка, но если вы серьезно настроены превзойти своих конкурентов и добиться лучших результатов с содержанием своего сайта, они того стоят.

8. Создайте RSS-канал

Создание RSS-канала не является абсолютно необходимым, но это не повредит.

RSS означает «действительно простое распространение», и это простой способ поделиться публикацией нового контента. По сути, это автоматизированный канал вашего веб-сайта, который обновляется каждый раз, когда вы публикуете новое сообщение.

Это также популярный способ подписки на блоги.

Каждое сообщение будет добавлено в RSS-канал сайта, и пользователи могут подписаться на этот канал и получать электронное письмо каждый раз, когда публикуется новое сообщение.

Сегодня большинство владельцев сайтов предпочитают иметь свои собственные списки адресов электронной почты, поэтому подписка на RSS больше не является популярным вариантом для этой цели.

Тем не менее, RSS-канал может быть эффективным способом сообщить Google о вашем новом содержании, как только оно будет опубликовано, и есть несколько других основных задач, которые вы можете использовать для автоматизации.

Считыватели RSS

Программа чтения RSS позволяет пользователям получать доступ ко всем RSS-каналам, на которые они подписаны, в одном месте. По сути, это настраиваемая новостная лента, где пользователи видят только истории и сообщения из таких публикаций, как.

Когда Google прекратил выпуск своего RSS-ридера Google Reader , многие подумали, что это означает конец работы RSS-ридеров в целом.

Тем не менее, многие люди все еще используют RSS-ридеры, такие как Feedly , в качестве инструмента для курирования контента.

Это идеально подходит для пользователей, которые хотят регулярно делиться полезным контентом в своих учетных записях в социальных сетях со своими подписчиками. Вместо того, чтобы разбираться в шуме на платформах социальных сетей, они могут использовать свои учетные записи Feedly для поиска высококачественных статей и сообщений из публикаций, которым они доверяют.

Итак, если читателям нравится ваш блог и они хотят знать о ваших новых сообщениях, но не обязательно хотят подписываться на рассылку новостей по электронной почте, полезно иметь RSS-канал.

Создать RSS-канал

Самый простой способ создать RSS-канал — использовать Feedburner.

Сначала введите URL-адрес своего блога в поле поиска. Имейте в виду, что в большинстве случаев ваш блог будет находиться в подпапке, например / blog.

Ввод этого URL-адреса (а не только вашего домена) гарантирует, что в ваш канал будут включены только сообщения вашего блога, а не другой контент, например служебные страницы или информация о ценах.

Затем дайте своей ленте заголовок и URL-адрес.

Затем нажмите «Далее» — и готово!

Теперь у вас есть адрес канала, на который пользователи могут подписаться в своих RSS-ридерах. Вы можете сообщить им об этом, добавив на свой сайт ссылку со стандартным значком RSS.

Если на вашем сайте уже есть значки социальных сетей, это логичное место для добавления RSS-канала.

Например, в заголовке журнала Search Engine Journal они ссылаются на свой RSS-канал прямо между кнопкой подписки по электронной почте и ссылками на свои учетные записи Twitter и Facebook.

Это позволяет посетителям, использующим RSS-ридеры, легко подписаться на их ленту.

RSS для автоматизации

После настройки RSS-канала вы также можете использовать его в сочетании с такими инструментами, как Zapier , для автоматизации публикации в социальных сетях.

Этот инструмент позволяет вам создавать «Zap-файлы» или ленты в вашем фиде, а затем автоматически публиковать их на различных платформах.

Сначала создайте учетную запись и введите URL-адрес канала.

Затем у вас есть возможность отфильтровать ленту по определенному контенту или темам.

В большинстве случаев вам нужно включать все свои сообщения.

Но если, например, вы хотите создать Zap, который включает только сообщения по определенной теме, используйте фильтр заголовка, чтобы включать в заголовок только сообщения с этим словом или фразой.

После настройки фильтров нажмите «Продолжить», чтобы завершить создание Zap.

Когда ваш Zap заработает, вы можете использовать Zapier для автоматизации множества задач. Наиболее распространенным является публикация новых RSS-элементов в ваших учетных записях в социальных сетях.

Вы можете настроить свою учетную запись таким образом, чтобы каждый раз, когда вы публикуете новую запись, она автоматически передавалась в выбранные вами социальные сети. Это простой способ сэкономить время и ускорить процесс привлечения трафика и поисковых роботов к вашему новому контенту.

9. Проверьте ошибки сканирования

По мере того, как вы работаете над своим сайтом и добавляете на него новое содержание, важно следить за тем, как он сканируется.

То, что ваш сайт сканируется эффективно сейчас , не означает, что вы никогда не столкнетесь с проблемами.

Могут возникать ошибки сканирования, особенно при внесении значительных изменений в свой веб-сайт, таких как добавление, удаление или перемещение страниц.

К счастью, с Search Console легко отслеживать ошибки сканирования.

Доступ к отчету об ошибках сканирования

Вы можете выявить проблемы, регулярно просматривая свой отчет об ошибках сканирования.

Вот как:

• Откройте Google Search Console и выберите свой веб-сайт
• Нажмите на сканирование
• Ошибки сканирования кликов

В этом отчете будут показаны все проблемы, которые возникали у Google при сканировании вашего сайта за последние 90 дней.

В разделе «Ошибки сайта» вверху показаны все основные проблемы, влияющие на работу всего сайта.

Если у вас есть какие-либо ошибки, вам нужно немедленно исправить их , поскольку они могут помешать правильной индексации всех ваших страниц.

Однако если у вас есть ошибки URL, они влияют только на определенные страницы вашего сайта. Часто это вызвано неработающими ссылками и ошибками перенаправления.

Если вы прокрутите страницу вниз, Search Console предоставит полный список этих URL-адресов и ошибок, так что вы сможете изучить любые проблемы и исправить их.

Используйте Screaming Frog для обнаружения ошибок

Вы также можете использовать такие инструменты, как Screaming Frog , для сканирования вашего сайта на предмет проблем, которые могут повлиять на его сканирование.

Например, если вы настроили переадресацию на своем сайте, это иногда может вызывать ошибки сканирования. Вы можете использовать Screaming Frog, чтобы убедиться, что все ваши перенаправления работают правильно и не приводят к ошибкам 404.

Перед сканированием вашего сайта перейдите на вкладку «Дополнительно» в настройках конфигурации и убедитесь, что установлен флажок «Всегда следовать перенаправлениям».

Это указывает Screaming Frog следовать всем вашим перенаправлениям и предоставлять полный путь и код состояния. Затем выберите «Отчеты» в главном меню и нажмите «Цепочки перенаправления».

Это покажет вам все переадресации на вашем сайте и то, как они работают.

Можно использовать любые перенаправления со статусом 200 или 301. Но если вы увидите какие-то ошибки 404, вы захотите их исправить. Затем запустите отчет еще раз, чтобы убедиться, что все работает правильно.

Если вы перешли на HTTPS, вы также можете использовать Screaming Frog для обнаружения проблем с «небезопасным контентом» или страниц, которые имеют URL-адреса HTTPS, но элементы HTTP.

Чтобы получить доступ к этой информации, выберите опцию «Небезопасное содержимое» в меню «Отчеты».

Если вы обнаружите какие-либо проблемы, проконсультируйтесь с разработчиком, который перенес ваш сайт, чтобы он мог исправить эти проблемы и убедиться, что ваш сайт в безопасности.

Наконец, вы можете использовать Screaming Frog для обнаружения канонических ошибок на вашем сайте.

Канонический тег сообщает сканерам, какую версию вашего домена вы предпочитаете, будь то WWW или не WWW, HTTP или HTTPS.

Подобно установке предпочтительного домена в Search Console, он помогает устранить проблемы с дублирующимся контентом и гарантирует, что Google индексирует правильную версию.

Однако неправильная реализация может вызвать серьезные ошибки сканирования.

Вы можете убедиться, что канонические теги вашего сайта работают правильно, выбрав «Канонические ошибки» в меню «Отчеты».

Если вы видите сообщение 404, это проблема, которую нужно немедленно исправить. Отправьте отчет своему разработчику, чтобы он определил причину проблемы и вернул статус сканирования без ошибок.

Заключение

Проиндексирование в Google — важный первый шаг к созданию успешного веб-сайта.Без него ваш сайт не может отображаться в результатах поиска — это означает, что, если ваши страницы не проиндексированы, они вряд ли получат какой-либо трафик.

К счастью, вам не нужно оставлять индексацию на волю случая. Такие инструменты, как Search Console и Yoast, позволяют контролировать сканирование и индексирование вашего сайта, а также позволяют легко отслеживать статус сканирования.

При обновлении сайта следите за тем, как он сканируется и индексируется. Регулярная проверка — это простой шаг, который позволяет выявлять проблемы и устранять их до того, как они вызовут проблемы с видимостью вашего поиска.

Plus, следование передовым методам, таким как отправка карты сайта, создание ссылок и публикация нового контента на регулярной основе, может помочь в быстром и эффективном сканировании вашего сайта.

Какие ваши любимые методы вы используете, чтобы убедиться, что ваш сайт правильно индексируется? Вы знаете, как проверить статус своего индекса Google?

Эта статья написана сегодня Daily Eggspert.

Последние сообщения Today’s Eggspert (посмотреть все)

Попросить Google перепроверить веб-сайт

Если вы недавно добавляли или вносили изменения на страницу своего сайта, вы можете запросить, чтобы Google повторно проиндексируйте свою страницу, используя любой из перечисленных здесь методов.Вы не можете запросить индексацию для URL что вам не удается.

Вы используете размещенную платформу управления контентом (например, Blogger или WordPress)? В В большинстве случаев платформа автоматически отправляет ваш новый контент в поисковые системы. Проверьте свои статьи поддержки платформы.

Общие положения

• Сканирование может занять от нескольких дней до нескольких недель. Будьте терпеливы и следите за прогрессом используя индекс Отчет о состоянии или URL Инструмент для осмотра.
• Все описанные здесь методы имеют примерно одинаковое время отклика.
• Существует квота на отправку отдельных URL-адресов.
• Если запросить повторное сканирование для одного и того же URL-адреса или карты сайта несколько раз, он не просканируется Быстрее.

Методы запроса сканирования

Используйте инструмент проверки URL-адресов (всего несколько URL-адресов)

Примечание: Вы должны быть владельцем или полноправный пользователь свойства Search Console, чтобы иметь возможность запросить индексацию в инструменте проверки URL.

Используйте URL Инструмент проверки для запроса сканирования отдельных URL-адресов. Обратите внимание: если у вас большие числа URL-адресов, вам следует вместо этого отправить карту сайта.

Чтобы отправить URL в индекс:

1. Следуйте общим рекомендациям.
2. Проверьте URL-адрес , используя URL-адрес Инструмент для осмотра.
3. Выбрать Запросить индексирование . Инструмент запустит живую проверку URL-адреса, чтобы увидеть есть ли у него какие-либо очевидные проблемы с индексацией, и если нет, страница будет поставлена ​​в очередь для индексации.Если инструмент обнаружит проблемы со страницей, попробуйте их исправить.

Запрос на сканирование не гарантирует, что включение в результаты поиска произойдет мгновенно. или даже вообще. Наши системы отдают предпочтение быстрому размещению качественного и полезного контента.

Отправить карту сайта (сразу несколько URL)

Карта сайта — это важный способ для Google обнаружить URL-адреса на вашем сайте. Карта сайта также может включать дополнительные метаданные о версиях на других языках, видео, изображениях или новостные страницы.Узнайте, как создать и отправить карта сайта.

Отправить отзыв о документации

Как поисковые роботы Google индексируют ваш сайт

Перед тем, как начать поиск, поисковые роботы собирают информацию с сотен миллиардов веб-страниц и систематизируют ее в поисковом индексе.

Процесс сканирования начинается со списка веб-адресов из прошлых сканирований и карт сайта, предоставленных владельцами веб-сайтов.Когда наши сканеры посещают эти веб-сайты, они используют ссылки на этих сайтах для обнаружения других страниц. Программа уделяет особое внимание новым сайтам, изменениям существующих сайтов и мертвым ссылкам. Компьютерные программы определяют, какие сайты сканировать, как часто и сколько страниц загружать с каждого сайта.

Мы предлагаем Search Console, чтобы предоставить владельцам сайтов детальный выбор способа сканирования их сайта Google: они могут предоставить подробные инструкции о том, как обрабатывать страницы на своих сайтах, могут запросить повторное сканирование или могут полностью отказаться от сканирования с помощью файла под названием «robots.текст». Google никогда не принимает платежи за более частое сканирование сайта — мы предоставляем одни и те же инструменты для всех веб-сайтов, чтобы обеспечить наилучшие результаты для наших пользователей.

Поиск информации путем сканирования

Интернет похож на постоянно растущую библиотеку с миллиардами книг и без центральной файловой системы. Мы используем программное обеспечение, известное как веб-сканеры, для обнаружения общедоступных веб-страниц. Сканеры просматривают веб-страницы и переходят по ссылкам на этих страницах так же, как если бы вы просматривали контент в Интернете.Они переходят от ссылки к ссылке и возвращают данные об этих веб-страницах на серверы Google.

Организация информации путем индексации

Когда сканеры находят веб-страницу, наши системы обрабатывают ее содержимое, как это делает браузер. Мы принимаем во внимание ключевые сигналы — от ключевых слов до актуальности веб-сайта — и отслеживаем все это в поисковом индексе.

Индекс поиска Google содержит сотни миллиардов веб-страниц и имеет размер более 100000000 гигабайт.Это похоже на указатель в конце книги — с записью для каждого слова, встречающегося на каждой веб-странице, которую мы индексируем. Когда мы индексируем веб-страницу, мы добавляем ее к записям для всех содержащихся на ней слов.

С помощью Сети знаний мы продолжаем выходить за рамки соответствия ключевых слов, чтобы лучше понимать людей, места и вещи, которые вам небезразличны. Для этого мы организуем не только информацию о веб-страницах, но и другие типы информации.Сегодня Google Search может помочь вам найти текст в миллионах книг из крупных библиотек, узнать время в пути в вашем местном агентстве общественного транспорта или помочь вам ориентироваться в данных из общедоступных источников, таких как Всемирный банк.

Как заставить Google мгновенно проиндексировать ваш новый веб-сайт

Хотите, чтобы на ваш сайт было больше обычного поискового трафика?

Готов поспорить, что да, мы все делаем!

Органический поисковый трафик имеет решающее значение для развития вашего веб-сайта и бизнеса.

Согласно некоторым исследованиям, около 53% трафика вашего сайта можно отнести к обычному поиску.

Но статистика не имеет большого значения, если ваш сайт вообще не отображается в результатах поиска.

Как вы индексируете свой новый сайт или блог в Google, Bing и других поисковых системах?

Что ж, у вас есть два варианта.

Вы можете использовать «черепаховый» подход — просто сядьте и подождите, пока это произойдет естественным образом, но это может занять недели или месяцы.

(Поверьте, я бывал там раньше — не весело.)

Или вы можете сделать это сейчас, давая вам больше времени и энергии для увеличения коэффициента конверсии, улучшения вашего социального присутствия и, конечно же, написания и продвижения отличного и полезного контента.

Не знаю, как вы, но я бы предпочел, чтобы мои сайты были проиндексированы как можно быстрее, потому что это дает мне больше времени для расширения моей аудитории.

Именно с помощью этих стратегий я увеличил количество посетителей этого блога до 600 000 в месяц так же быстро, как и я!

Хотите сделать то же самое?

Не сдавайтесь, потому что в этом пошаговом руководстве я рассказываю обо всем, что узнал о SEO и о том, как быстро проиндексировать ваш сайт!

Я расскажу, как заставить Google быстро проиндексировать наш веб-сайт, что приведет к увеличению органического поискового трафика и повышению рейтинга.

Приступим!

Зачем вам нужен Google для индексации вашего сайта?

Во-первых, очевидный ответ.

Если вы хотите, чтобы ваш сайт вообще отображался в результатах поиска, его необходимо проиндексировать.

Однако вы не хотите, чтобы ваш сайт индексировался только один раз. Вы хотите, чтобы поисковые системы продолжали переиндексировать ваш сайт.

Поисковые системы, такие как Google, не обновляются автоматически.

Они полагаются на пауков — маленькие кусочки компьютерного кода, которые каждая поисковая система отправляет для «сканирования» сети (отсюда и «паук»).

Вам нужна эффективная частая скорость сканирования.

Работа паука — искать новые материалы в сети и обновлять уже проиндексированную версию вашего сайта. Этим «новым материалом» может быть новая страница на существующем сайте, изменение существующей страницы или совершенно новый сайт или блог.

Как только паук находит новый сайт или страницу, ему необходимо выяснить, о чем этот новый сайт или страница.

Еще на Диком Диком Западе ранней сети пауки поисковых машин были далеко не такими умными, как сегодня.Вы можете заставить паука проиндексировать и ранжировать вашу страницу, основываясь только на том, сколько раз конкретная поисковая фраза («ключевое слово») появлялась на странице.

Для сегодняшнего успеха контента нельзя полагаться на эти старые стратегии поисковой оптимизации.

Ключевое слово даже не обязательно должно быть в теле страницы. Многие люди оценивали торговую марку своего крупнейшего конкурента, просто вставляя десятки вариантов этой торговой марки в метатеги страницы!

К счастью для пользователей поиска Google и этичных владельцев веб-сайтов, те времена давно прошли.

Сегодня за наполнение ключевыми словами и метатегами вы будете наказаны, а не вознаграждены. А мета-теги ключевых слов на самом деле вообще не являются частью алгоритма (хотя все же есть веские причины их использовать).

Если вы не будете осторожны, ваш сайт может вообще исключить из индекса — это означает, что ваш сайт вообще не будет ранжироваться ни по одному ключевому слову.

В наши дни Google больше заботится об общем опыте пользователя на вашем сайте и о намерениях пользователя, стоящих за поиском — i.д., хочет ли пользователь что-то купить (коммерческое намерение) или чему-то научиться (информационное намерение)?

Они даже сделали Page Experience фактором ранжирования.

Не поймите меня неправильно — ключевые слова по-прежнему имеют значение. По словам Брайана Дина из Backlinko, важны и другие факторы — всего до 200. К ним относятся такие вещи, как качественные входящие ссылки, социальные сигналы (хотя и не напрямую) и действительный код на всех ваших страницах.

Ничего из этого не будет иметь значения, если пауки не смогут определить поисковые системы, где находятся ваши страницы, то есть они не будут отображаться в результатах поиска.

Вот почему индексирование веб-сайтов так важно.

Проще говоря, индексирование — это способ паука собирать и обрабатывать все данные со страниц и сайтов во время их обхода по сети.

Частое индексирование улучшает результаты поиска.

Паук отмечает новые документы и изменения, которые затем добавляются в поисковый индекс, поддерживаемый Google. Эти страницы добавляются только в том случае, если они содержат качественный контент и не вызывают никаких тревог из-за таких сомнительных действий, как наполнение ключевыми словами или создание кучи ссылок из источников, не заслуживающих доверия.

Когда паук видит изменение на вашем веб-сайте, он обрабатывает как контент (текст) на странице, так и те места на странице, где размещены условия поиска. Он также анализирует теги заголовков, метатеги и атрибуты alt для изображений.

Затем этот паук добавляет или «индексирует» этот контент в Google.

Вкратце об индексировании. Это важный инструмент для веб-мастеров.

Когда поисковый пользователь приходит в поисках информации, вводя ключевые слова для поиска, алгоритм Google начинает работать.Затем алгоритм решает, где оценить страницу по сравнению со всеми другими страницами, связанными с этими ключевыми словами.

Частота индексации вашего сайта может повлиять на вашу эффективность в результатах поиска. Вы хотите, чтобы весь ваш последний контент был всегда доступен для тех, кто ищет, и для пауков Google.

Это краткая и несколько упрощенная версия того, как Google находит, анализирует и индексирует новые сайты, подобные вашему.

Многие другие поисковые системы, такие как Bing или Yahoo, следуют аналогичным процедурам, хотя могут быть различия в специфике, поскольку каждая имеет свой собственный алгоритм.

Какие факторы индексации имеют значение?

Вам нужен эффективный индекс для вашего веб-сайта.

Это означает, что вы хотите, чтобы пауки поисковых систем как можно быстрее находили ваш новый контент после того, как вы нажали кнопку «Опубликовать».

Вы можете проверить, как часто Google сканирует ваши страницы, войдя в Search Console.

Еще не настроили Google Search Console? Перейдите к шагу 2, чтобы узнать, как настроить свой веб-сайт.

В Search Console щелкните свой веб-сайт.Затем нажмите «Настройки»> «Статистика сканирования»> «Открыть отчет». Вы увидите следующие графики:

Первый график показывает, как часто Google сканирует ваш сайт.

График «Запросы сканирования» показывает, как часто Google сканирует мой сайт каждый день.

Как показывает практика, чем больше ползать, тем лучше.

Однако в некоторых случаях чрезмерное сканирование может перегрузить ресурсы сервера. Обычно это результат неправильной конфигурации сервера, а не проблемы с пауками Google.

Это очень редко, поэтому вам, вероятно, не стоит об этом беспокоиться. Google позволяет вам изменять скорость сканирования (только вниз, а не вверх), если это происходит с вами.

Итак, как мне увеличить скорость сканирования?

В последнее время я много публикую и обновляю старый контент, поэтому Google стремится получать все мои обновления и изменения как можно быстрее. Он учится чаще проверять меня.

Я также перешел на новый веб-хостинг в апреле, который намного быстрее, чем мой старый.

Чем быстрее загружается ваш сайт, тем быстрее Google может его проиндексировать!

Google хочет рекомендовать своим пользователям лучшие веб-сайты. Он ищет сайты, которые удобны для пользователей. Хотя это включает в себя множество факторов, очень важны качественный контент и скорость загрузки сайта.

Проще говоря:

Более быстрый сайт = лучший пользовательский опыт.

Лучший пользовательский опыт = более высокий рейтинг в результатах поиска.

Гораздо важнее, чем то, как часто Google индексирует ваш сайт, сколько страниц он индексирует.Вы хотите, чтобы как можно больше страниц вашего сайта было проиндексировано.

(не волнуйтесь, ваша карта сайта позаботится об этом, о чем я подробно расскажу в шаге 7.)

Но сначала давайте начнем с самого начала. Следующие 18 шагов проведут вас через все, что вам нужно знать об индексировании вашего сайта.

Вам не обязательно делать все 18 шагов, чтобы иметь хорошо проиндексированный веб-сайт, но если вам интересно, как повысить рейтинг в Google, это единственное руководство, которое вам когда-либо понадобится!

Шаг 1. Мой сайт уже проиндексирован?

Если вы не создаете новый сайт, он, вероятно, уже проиндексирован.

Если вы не уверены, вот как это узнать.

Самый простой способ проверить это — выполнить поиск на сайте : yourdomain.com в Google. Если Google знает, что ваш сайт существует и уже просканировал его, вы увидите список результатов, аналогичный тому, который был показан для NeilPatel.com на скриншоте ниже:

Если Google еще не нашел ваш сайт, вы не получите никаких результатов, например:

Если ваш сайт уже проиндексирован, это хорошо, но, вероятно, его можно улучшить.

Остальные шаги в этом руководстве помогут вам убедиться, что ваш сайт проиндексирован в полной мере.

Шаг 2. Установка и настройка Google Analytics и Search Console

Если вы еще не знакомы с этими бесплатными инструментами Google, вот краткое описание.

Google Analytics: Измеряет статистику вашего веб-сайта, такую ​​как посетители, время, проведенное на сайте, какие страницы они просматривали, откуда они и т. Д.

Консоль поиска Google (ранее известная как Google Webmaster Tools): Она позволяет отслеживать различные аспекты вашего веб-сайта, например, когда он последний раз сканировался, любые ошибки индексации, проблемы с безопасностью и т. Д.

Search Console также позволяет вам управлять некоторыми ключевыми аспектами вашего появления в результатах поиска и вручную отправлять карты сайта — все это я расскажу позже в этой статье.

Но сначала давайте приступим.

Если у вас уже есть Google Analytics и Search Console, нажмите здесь, чтобы перейти к Шагу 3: Создание стратегии контент-маркетинга.

Чтобы настроить Google Analytics, нажмите здесь и войдите в свою учетную запись Google.

Это может быть ваш @gmail.com или ваш адрес электронной почты @ mydomain.com, если вы используете сервис Google G Suite for Business.

Затем нажмите «Зарегистрироваться».

Введите имя и URL-адрес своего веб-сайта, затем нажмите «Получить идентификатор отслеживания» внизу страницы.

Вы увидите такую ​​страницу. Не паникуйте!

Есть несколько способов установить Google Analytics на свой веб-сайт.

Настройка Google Analytics

Если вы используете WordPress или другую систему управления контентом, которая запрашивает ваш идентификатор отслеживания Google Analytics, вам просто нужен номер в самом верху.В моем случае это UA-98962030-1.

Это не мой настоящий идентификатор отслеживания! Просто говорю, не размещайте это в Интернете! 😉

Плагин Google Analytics от MonsterInsights для WordPress очень прост в настройке.

Просто скачайте его, загрузите плагин в WordPress, активируйте его, и вы увидите этот экран.

Нажмите синюю кнопку «Аутентификация», и она проведет вас через все остальное.

Для настройки плагина у вас должен быть уже создан профиль Analytics, что мы и сделали на предыдущем шаге.

Если вы не используете WordPress или хотите добавить код Google Analytics вручную, вот как это сделать.

Вам необходимо поместить этот код (в красном поле) на каждую страницу вашего веб-сайта.

Самый простой способ сделать это — создать один файл с кодом в нем, а затем создать строку кода на каждой странице вашего веб-сайта, которая будет загружать этот файл.

Кусок торта, правда?

Не волнуйтесь, вот как это сделать!

Для этого шага вам необходимо иметь доступ к файлам вашего веб-сайта на сервере вашей хостинговой компании.Обычно это делается через FTP.

Откройте свой FTP-клиент (FileZilla — отличный, бесплатный) и войдите на свой сервер. Если у вас нет этой информации, вы можете создать учетную запись FTP в cPanel своего веб-хостинга или просто обратиться к своему веб-хостеру, чтобы попросить их предоставить информацию.

Ваша регистрационная информация должна выглядеть примерно так:

После подключения вы увидите список подобных файлов и папок.

Откройте новый текстовый файл (для этого подойдут Блокнот для Windows или TextEdit для Mac).Убедитесь, что для него установлено значение «Только обычный текст».

В TextEdit вы нажимаете «Формат» -> «Сделать обычный текст», чтобы сделать это.

Это действительно важно, потому что текстовые процессоры, такие как Word, могут добавлять форматирование в код, которое может испортить код на вашем сайте. При работе с кодом всегда используйте обычный текст .

Когда у вас будет обычный текстовый документ, вставьте код Google Analytics. В итоге вы получите:

Сохраните файл как analyticstracking.php. Убедитесь, что у него есть расширение.php, а не .txt.

Если ваш текстовый редактор по какой-то причине сохранил его с именем «analyticstracking.php.txt», просто переименуйте файл на своем компьютере в «analyticstracking.php».

Загрузите этот файл в корневой каталог через FTP (первая папка вашего сайта).

Вам нужно добавить одну строку кода для каждого шаблона страницы, который у вас есть. Это «вызывает» только что созданный файл и обеспечивает отслеживание каждой страницы вашего веб-сайта, использующей этот шаблон, в Google Analytics.

Для этого загрузите все файлы шаблонов PHP для своего веб-сайта и отредактируйте их.

Если у вас есть один с именем header.php, который загружается на каждой странице, вам нужно сделать это только один раз!

Загрузите header.php.

Затем откройте загруженный файл в текстовом редакторе.

Найдите тег и начало, например:

Вставьте одну строку кода сразу после тега.

Скопируйте этот код:

И вставьте сюда:

Сохраните файл header.php и повторно загрузите его на свой веб-сайт.

Готово!

Если у вас нет файла header.php, вам нужно повторить этот процесс для каждого шаблона страницы php, который есть на вашем веб-сайте, например index.php, blog.php и т. Д.

Если вы используете WordPress, вы определенно в выигрыше. Все, что вам нужно сделать, это установить плагин.

Хорошо, нужно настроить еще кое-что, и мы перейдем к шагу 3.

Настройка консоли поиска Google

Теперь, когда мы настроили Google Analytics, пора добавить наш веб-сайт в Google Search Console (ранее известный как Google Webmaster Tools).

Щелкните здесь, чтобы перейти в Search Console. Войдите в свою учетную запись Google.

Вы увидите этот экран:

Нажмите «Начать сейчас».

Затем вам нужно будет подтвердить, что вы являетесь владельцем этого домена. Есть несколько способов сделать это.

По умолчанию он может показать вам вариант подтверждения через ваш веб-хостинг.

Щелкните раскрывающееся меню, чтобы найти поставщика доменного имени.

Если вашего нет в списке, вы можете нажать «Другое» (внизу).

Search Console затем попросит вас создать запись TXT, что потребует изменения конфигурации вашего домена.

Это немного над головой? Не волнуйтесь, у меня есть способ попроще!

Если вы все же хотите добавить запись TXT, вот как это сделать.

Щелкните «Альтернативные методы» вверху.

Есть два простых способа подтвердить свой домен: с помощью Google Analytics или с помощью загрузки файла HTML.

Я расскажу о них обоих.

Чтобы подтвердить с помощью Google Analytics, просто выберите его и нажмите «Подтвердить».

Google проверит вашу учетную запись Google Analytics, чтобы убедиться, что вы являетесь тем, кем себя называете, и если это так, вы увидите сообщение об успешном завершении.Убедитесь, что вы используете тот же аккаунт Google для Search Console, что и для Analytics.

Процесс загрузки файлов HTML по-прежнему остается довольно простым.

Щелкните, чтобы загрузить файл на свой компьютер на шаге 1, затем снова откройте программу FTP. Загрузите HTML-файл Google в свой корневой каталог.

Затем перейдите по URL-адресу, который Google дал вам, чтобы убедиться, что файл там. В моем случае это https://neilpatel.com/googlefba739b2a6dd0306.html.

Если вы загрузили его правильно, вы увидите имя файла в окне браузера.

Вернитесь в Search Console и нажмите «Подтвердить» внизу.

Вот и все!

Не забудьте оставить HTML-файл на вашем сервере. Это гарантирует, что ваш сайт будет оставаться подтвержденным в Search Console.

Есть еще две действительно важные вещи, которые вам нужно сделать сейчас:

• Добавьте обе версии своего домена neilpatel.com и www.neilpatel.com
• Установите предпочтительный домен

Зачем вам это нужно, спросите вы?

Это может вызвать ошибки сканирования, которых мы пытаемся избежать!

Добавить другую версию вашего URL-адреса просто — повторите тот же процесс, который я только что объяснил.В приведенном выше примере я подтвердил свой домен neilpatel.com. Поэтому я бы пошел в Search Console и проделал те же шаги, но вместо этого использовал бы neilpatel.com.

После добавления в Search Console и «yourdomain.com», и «www.yourdomain.com», вам необходимо установить предпочтительный домен.

Для этого нажмите на свой веб-сайт в Search Console.

В правом верхнем углу щелкните значок шестеренки и выберите Параметры сайта.

Выберите, хотите ли вы, чтобы ваши URL отображались с префиксом www.»Или без.

Я собираюсь показать вам все замечательные вещи, которые вы можете делать с Search Console, позже в этой статье, так что держите эту вкладку открытой!

Но теперь нам нужно вернуться к основам маркетинга и поговорить о создании стратегии SEO для вашего контента.

Шаг 3. Создание стратегии контент-маркетинга

В ваших интересах иметь письменную стратегию контент-маркетинга, ориентированную на результаты поиска.

Но не верьте мне на слово.

От Института контент-маркетинга:

«Те, у кого есть задокументированная стратегия контент-маркетинга:

• С гораздо большей вероятностью считают себя эффективными в контент-маркетинге
• Чувствуют себя значительно менее сложными во всех аспектах контент-маркетинга
• Считают себя более эффективными в использовании всех тактик контент-маркетинга и каналов социальных сетей
• Могут оправдать расходы более высокий процент их маркетингового бюджета на контент-маркетинг »

Все это абсолютно верно.Что касается меня, я чувствую себя намного лучше, когда у меня есть письменный план действий, на который я могу ссылаться и отслеживать свой успех.

Мои блоги и многочисленные предприятия не росли бы так быстро, как они, без письменного плана.

Помимо того, что вы будете сосредоточены на своих целях, документированная стратегия содержания также поможет вам проиндексировать страницы вашего сайта путем создания новых страниц содержания.

Согласно отчету HubSpot «Not Another State of Marketing Report 2020», 60% контент-маркетологов заявили, что контент очень важен или чрезвычайно важен для их общей стратегии.

Одно исследование показало, что у компаний, использующих контент-маркетинг, коэффициент конверсии в шесть раз выше.

Делать все возможное, чтобы публиковать ценный, интересный и полезный контент, а затем делать все возможное, чтобы ваши потенциальные клиенты видели его.

Вот пример.

Когда я создаю и публикую на своем сайте профессиональную инфографику, и она публикуется на другой веб-странице со ссылкой на мою страницу, я получаю «кредит» контент-маркетинга за оба сообщения.

Поскольку это инфографика, у меня больше шансов привлечь аудиторию на обоих сайтах.

Инфографика

имеет один из самых высоких показателей вовлеченности читателей. Доказано, что большинство людей тратят больше времени на просмотр инфографики, чем на чтение текста на странице.

Но вы все это читаете, верно ?!

Инфографика распространяется в социальных сетях примерно в 3 раза чаще, чем любым другим типом контента.

Когда вы разрабатываете свою стратегию контент-маркетинга, блоггинг обязательно должен быть в списке.

Но вам также необходимо учитывать контент, который вы будете публиковать на других веб-сайтах. Это не только помогает увеличить ваш трафик, но также помогает повысить скорость индексации и получение входящих ссылок.

Вот несколько примеров внешнего контента, который можно использовать в вашем плане:

• Гостевые посты на других сайтах в вашей нише
• Пресс-релизы, отправленные на сайты, которые публикуют такой контент
• Статьи на сайтах высококачественных каталогов статей (Примечание: здесь будьте осторожны — подавляющее большинство каталогов статей — это , а не высокое качество и может навредить вашему бренду, репутации и поисковой оптимизации.)
• Некоторые авторитетные каталоги — это Medium и HubPages.
• Видео, размещенные на Vimeo или на вашем канале YouTube

Конечно, любой контент , на котором вы размещаете свое имя или бренд, должен быть высокого качества и опубликован на авторитетном сайте с хорошей репутацией.

В противном случае вы нарушите цель поисковой оптимизации и нанесете ущерб своему трафику и бренду.

Контент, опубликованный на сайтах со спамом и имеющий обратную ссылку на ваш сайт, подсказывает результатам поиска Google, что ваш сайт также является спамом.

Примерами сайтов с хорошей репутацией, на которых можно публиковать гостевые сообщения, могут быть Forbes, Entrepreneur, Smashing Magazine и т. Д. Это известные веб-сайты с репутацией качественного контента, а это именно то, что вы хотите ассоциировать со своим брендом.

Не очень хорошие места для публикации? Сайты, полные некачественных красных флажков: загроможденные рекламой, множеством грамматических или орфографических ошибок или неизвестные в той отрасли, на которую вы ориентируетесь.

Я не хочу здесь называть никаких имен, но вашего здравого смысла должно хватить, чтобы сказать вам, что такое сайт, рассылающий спам.Например, сайт под названием neilsbestmarketingadvice101.tumblr.com, вероятно, мало что вам даст, верно?

Хорошо продуманный план контент-маркетинга поможет вам избежать безумной спешки по публикации большего количества контента. Это ставит вас на место водителя поисковой оптимизации, поэтому вы можете сосредоточиться на привлечении потенциальных клиентов и повышении коэффициента конверсии.

Создание стратегии письменного контента не должно быть трудным.

Вот фреймворк, который я использую для своего:

• Каковы ваши цели? Укажите цели SMART и способы измерения своего прогресса (т.е., метрики).
• Кто ваша целевая аудитория? Профили или личности клиентов важны для понимания вашей аудитории и того, что они хотят / нуждаются.
• Какие типы контента вы будете создавать? Вы должны быть уверены, что доставляете контент, который хочет видеть ваша целевая аудитория.
• Где это будет опубликовано? Конечно, вы будете размещать свой собственный контент на своем веб-сайте, но вы также можете обратиться к другим сайтам или использовать такие платформы, как YouTube, LinkedIn и Slideshare.
• Как часто вы будете публиковать свой контент? Гораздо лучше последовательно выпускать одну хорошо написанную и качественную статью в неделю, чем публиковать каждый день в течение недели, а затем ничего не публиковать в течение месяца. Последовательность — ключ к успеху.
• Какие системы вы выберете для публикации своего контента? Системы — это, по сути, просто повторяемые процедуры и шаги для выполнения сложной задачи. Они помогут вам сэкономить время и быстрее писать контент, чтобы вы могли не отставать от графика.Все, что помогает вам публиковать контент за меньшее время, не жертвуя качеством, улучшит вашу прибыль.
• Какие инструменты вы будете использовать? Укажите инструменты и технологии ведения блогов / контента, которые вы будете использовать, и то, как они вписываются в вашу систему.

После того, как вы задокументируете свой план контент-маркетинга, вам станет проще публиковать качественный контент по согласованному графику. Это поможет быстрее проиндексировать новые веб-страницы вашего сайта.

Шаг 4. Начните вести блог

Зачем нужен блог?

Это просто: блоги — это трудолюбивые SEO-машины.Контент блога сканируется и индексируется быстрее, чем статические страницы.

Блоги также привлекают больше трафика. Компании, которые ведут блог, регулярно привлекают на свои сайты на 55% больше посетителей, чем те, которые этого не делают.

Блоги подходят для любого бизнеса, отрасли или ниши, а также почти для всех бизнес-моделей — даже для сайтов B2C и электронной коммерции.

Не бойтесь вести блог.

Да, это требует постоянных усилий. Вы действительно должны регулярно писать (или передавать на аутсорсинг) качественные и подробные сообщения в блог.

Награды, как я выяснил, того стоят.

Если у вас есть сайт электронной торговли, ведение блога не должно быть очень сложным или трудным.

Например, когда вы создаете страницу нового продукта, напишите и опубликуйте в блоге сообщение о новом продукте. Добавьте качественные изображения товара и ссылку на страницу товара. Это помогает поисковым системам быстрее индексировать страницу продукта.

Еще одна отличная стратегия ведения блога для электронной коммерции — писать пост каждый раз, когда покупатель задает вам вопрос.

Для более ориентированной на продажи стратегии поделитесь ссылкой на этот пост в блоге с другими блоггерами и влиятельными лицами, чтобы известить о них. Возможно, они захотят разместить ваш продукт в своих блогах, которые, опять же, являются отличным источником ссылок и трафика и положительно повлияют на вашу скорость сканирования.

Шаг 5. Используйте внутренние ссылки на своем веб-сайте

Внутренние ссылки, то есть ссылки на страницы вашего собственного веб-сайта, — еще один отличный способ быстро проиндексироваться и повысить свою позицию в обычных результатах поиска.

Одним из очевидных источников внутренних ссылок является навигация по вашему сайту.

Важно структурировать навигацию по веб-сайту так, чтобы она была понятна Google.

Ваша навигация должна следовать предсказуемому потоку, например Домашняя страница -> Категория -> Дополнительная страница.

Очевидно, что все элементы должны быть связаны. Итак, если вы веб-дизайнер, ваша навигация может выглядеть так.

Домашняя страница -> Услуги веб-дизайна -> Дизайн WordPress

Видите, как все это связано и имеет смысл?

Еще одним ключевым фактором является правильная структура ваших URL-адресов.Эмпирическое правило Google — сделать их максимально простыми и понятными.

Так что, если это имеет смысл для вас, человека, это должно иметь смысл и для Google.

Еще один отличный способ ссылаться на ваш контент — это сообщения в блогах.

Люди обычно связывают фразы в своих блогах с соответствующими темами, например, если бы я хотел предложить вам дополнительную информацию о структурировании URL-адресов.

Или я мог бы создать такую ​​строку:

Связано: Имеет ли значение структура URL-адреса? Ответ, управляемый данными

Создает ссылки, которые заставляют пауков Google возвращаться и сканировать эти страницы снова.Кроме того, это положительно улучшает пользовательский опыт. Ваши читатели оценят дальнейшие ресурсы.

Не забывайте всегда помнить об удобстве использования. Это идет рука об руку с SEO. У Google есть все эти правила и способы работы, потому что он пытается предоставить своим пользователям наилучшие результаты и дать им ответы, которые они ищут.

Вы должны сосредоточиться на одном и том же!

Шаг 6. Продвигайте публикацию вашего контента в социальных сетях

Естественно, заставить людей делиться вашим контентом в социальных сетях — это хорошо.Совершенно уверен, что мне не нужно убеждать вас в этом!

Он открывает доступ к вашему контенту новым людям, привлекает их на ваш сайт, и это тот контент, который люди хотят видеть больше всего.

Но публикация ваших постов в социальных сетях также имеет преимущества для SEO, поскольку создает обратные ссылки на ваш контент.

Что, если вы внимательно … говорит паукам Google проиндексировать ваш сайт

бонусных балла, если вы уже догадались.

Сейчас ведутся споры о том, насколько ссылки в социальных сетях влияют на ранжирование в обычном поиске.

Google высказал неоднозначные мнения по этому поводу, заявив, что сначала в 2015 году они вообще не учитывали публикации в социальных сетях для ранжирования в органическом поиске, а затем заявили, что они сделали это.

«Да, мы используем это как сигнал. Он используется как сигнал в нашем органическом рейтинге и рейтинге новостей. Мы также используем его, чтобы сделать наши новости универсальными, отмечая, сколько людей поделились статьей ».

Мэтт Каттс, бывший известный Google, сказал несколько лет назад:

Я снял видео еще в мае 2010 года, где я сказал, что мы не использовали «социальные сети» в качестве сигнала, и в то время мы не использовали это как сигнал, но сейчас мы снимаем это на пленку в декабре. 2010, и мы используем это как сигнал.

Bing, с другой стороны, очень четко дал понять, как он использует ссылки социальных сетей в рейтинге результатов поиска, известные как «социальные сигналы».

Многие маркетологи считают, что социальные сигналы являются важным фактором ранжирования, и я один из них.

Обмен в соцсетях помог мне значительно расширить мой блог. Когда я основал NeilPatel.com, я начал с нуля и быстро увеличил свою аудиторию до 60 000 читателей в месяц за 2 месяца.

Сейчас у меня в среднем более 20 миллионов посещений в месяц.

Я приписываю большую часть своего успеха социальному обмену и положительному росту SEO, который я получил благодаря социальным сигналам, ссылкам и повышенной скорости индексации страниц.

В любом случае социальный обмен имеет много других преимуществ для вашего веб-сайта, так что просто сделайте это!

Шаг 7. Добавьте плагин Sitemap, чтобы Google проиндексировал ваш сайт

Во-первых, давайте поговорим о том, что такое карта сайта.

Вы, несомненно, видели слово «карта сайта» раньше, но, возможно, вы никогда не знали, что именно оно означает и как оно соотносится с поисковой оптимизацией.

Карта сайта — это файл, который сообщает Google о файлах на вашем веб-сайте, в том числе о том, как они соотносятся друг с другом. Это упрощает сканирование и индексирование вашего сайта Google.

Карта сайта — это в основном список (в формате XML) всех страниц вашего сайта . Его основная функция — сообщать поисковым системам, когда что-то изменилось — будь то новая веб-страница или изменения на определенной странице, — а также то, как часто поисковая система должна проверять наличие изменений.

Влияют ли карты сайта на ваш поисковый рейтинг? Могут, но ненамного.

Они действительно помогают вашему сайту быстрее индексироваться с более эффективной скоростью сканирования.

В современном мире поиска существует множество мифов о поисковой оптимизации, которых следует опасаться. Но одно остается неизменным: при прочих равных, отличный контент поднимется на вершину, как сливки.

Sitemap помогает сканировать и индексировать ваш контент, чтобы он мог быстрее подняться на вершину поисковой выдачи, согласно блогу Google для веб-мастеров.

По словам Google, «отправка файла Sitemap помогает убедиться, что Google знает об URL-адресах на вашем сайте.”

Это гарантия, что ваш сайт будет немедленно проиндексирован? Нет. Но это определенно эффективный инструмент для веб-мастеров, который помогает в этом процессе.

Кейси Генри задался вопросом, насколько карты сайта повлияют на скорость сканирования и индексирование, поэтому он решил провести небольшой эксперимент.

Кейси поговорил с одним из своих клиентов, который вел довольно популярный блог, используя как WordPress, так и плагин Google XML Sitemaps Generator для WordPress (подробнее об этом ниже).

С разрешения клиента Кейси установил скрипт отслеживания, который отслеживал действия робота Googlebot на сайте.Он также отслеживал, когда бот обращался к карте сайта, когда она была отправлена, и каждую страницу, которая была просканирована. Эти данные хранились в базе данных вместе с отметкой времени, IP-адресом и пользовательским агентом.

Клиент просто продолжил свой обычный график публикации (около двух или трех сообщений в неделю).

Кейси назвал результаты своего эксперимента не чем иным, как «поразительными» с точки зрения поисковой оптимизации.

Но судите сами: когда карта сайта не была отправлена, Google потребовалось в среднем 1375 минут, чтобы найти, просканировать и проиндексировать новый контент.

Когда была отправлена ​​карта сайта? Это среднее значение упало до 14 минут.

Как часто вы должны сообщать Google, чтобы он проверял наличие изменений, отправляя новую карту сайта? Не существует твердого правила.

Однако некоторые виды контента требуют более частого сканирования и индексации.

Например, если вы добавляете новые продукты на сайт электронной торговли, и у каждого из них есть собственная страница продукта, вам нужно, чтобы Google часто проверял их, увеличивая скорость сканирования.То же самое верно и для сайтов, которые регулярно публикуют горячие или свежие новости, которые постоянно конкурируют в запросах поисковой оптимизации.

Но есть гораздо более простой способ создать и отправить карту сайта. Если вы используете WordPress, просто установите и используйте плагин Google XML Sitemaps.

Его настройки позволяют указать плагину, как часто карта сайта должна создаваться, обновляться и отправляться в поисковые системы. Он также может автоматизировать процесс для вас, так что всякий раз, когда вы публикуете новую страницу, карта сайта обновляется и отправляется.

Другие инструменты карты сайта, которые вы можете использовать, включают Генератор XML-карт сайта, онлайн-инструмент, который должен работать для любого типа веб-сайтов.

Получив карту сайта, вы хотите отправить ее в Google Search Console, о чем мы поговорим дальше.

Шаг 8. Отправьте файл Sitemap в Search Console

Очень важно, чтобы ваша карта сайта была актуальной для Google Search Console. Я люблю заходить раз в 2 недели или, по крайней мере, ежемесячно, и обновлять его.

Еще не зарегистрированы в Google Search Console? Вернитесь к шагу 2, чтобы узнать, как это сделать.

Щелкните URL-адрес, чтобы перейти на панель управления для этого сайта. Слева в разделе «Индекс» нажмите «Карты сайта». Вы увидите уже отправленные в Google карты сайта, а также добавите новую карту сайта.

Для следующего шага вам понадобится URL-адрес вашей карты сайта. Если вы используете плагин для WordPress, эта информация будет доступна в его настройках.

Обычно это ваш домен.ru / sitemap.xml.

Как я упоминал выше, вы также можете использовать веб-сайт, такой как XML-Sitemaps.com, для его создания. Для этого просто введите свой URL и выберите периодичность изменения.

Частота изменения просто говорит Google, как часто он должен индексировать ваш сайт. Это всего лишь предложение Google, и паук должен определить, когда он вернется, чтобы снова проиндексировать ваш сайт.

Как только он предоставит вам файл sitemap.xml, загрузите его на свой веб-сайт через FTP.

Получив URL-адрес карты сайта, введите его в Google Search Console.

После отправки вы увидите это внизу страницы.

Когда Google завершит его индексирование, столбец «Обработано» изменится с «Ожидание» на дату, когда он был проиндексирован.

Как видите, только 294 из 473 моих веб-страниц были проиндексированы! Будем надеяться, что за это время паук подберет их больше. Однако не беспокойтесь, если вы увидите похожую статистику — некоторые из этих страниц, вероятно, вы и не хотите индексировать (подробности см. В шаге 17!).

Возьмите за привычку отправлять новую карту сайта не реже одного раза в месяц.

Вы также можете использовать Инструменты Bing для веб-мастеров, чтобы сделать то же самое с Bing. Хорошо бы охватить все ваши базы, тем более что Bing — вторая по популярности поисковая система после Google!

Шаг 9. Создайте каналы социальных сетей

Есть ли у вас профили в социальных сетях для вашего сайта или блога? Если нет, то сейчас самое время.

Почему? Потому что, как мы узнали на шаге 6, один из компонентов поисковой оптимизации — это внимание к социальным сигналам.

Эти сигналы могут побудить поисковые системы сканировать и индексировать ваш новый сайт.

Более того, социальные сигналы помогут вам повысить рейтинг ваших страниц в результатах поиска.

К настоящему времени очевидно, что надежный маркетинговый план в социальных сетях помогает SEO. Но социальные профили на вашем веб-сайте также дают вам другое место для добавления ссылок на ваш сайт или блог.

профилей Twitter, страниц Facebook, профилей LinkedIn или страниц компаний, профилей Pinterest, каналов YouTube и особенно профилей или страниц Google+ — все это легко создать и является идеальным местом для добавления ссылок, указывающих на ваш веб-сайт.

Если вы не хотите создавать новые профили на социальных сайтах для своего нового сайта или блога, вы также можете просто добавить ссылку нового сайта к своим существующим профилям, чтобы увеличить скорость сканирования.

Однако я настоятельно рекомендую создавать новые профили для проектов. Помимо того, что он хорош для SEO, он отлично подходит для брендинга.

Это, вероятно, само собой разумеется, но если вы создаете эти каналы в социальных сетях, будьте готовы также регулярно обновлять их, добавляя новый контент.

Шаг 10. Используйте robots.txt

Если вы не являетесь опытным программистом или разработчиком, возможно, вы видели файл robots.txt в файлах своего домена и задавались вопросом, что это такое и для чего он нужен.

Часть «что это такое» очень проста. Это простой текстовый файл, который должен находиться в корневом каталоге вашего домена. Если вы используете WordPress, он будет в корневом каталоге вашей установки WordPress.

Часть «что он делает» немного сложнее.По сути, robots.txt — это файл, который дает строгие инструкции для роботов поисковых систем о том, какие страницы они могут сканировать и индексировать — и от каких страниц следует держаться подальше.

Когда поисковые роботы находят этот файл в новом домене, они читают содержащиеся в нем инструкции, прежде чем делать что-либо еще.

Если они не находят файл robots.txt, поисковые роботы предполагают, что вы хотите просканировать и проиндексировать каждую страницу.

Теперь вы можете спросить: «С какой стати мне нужно, чтобы поисковые системы , а не индексировали страницу на моем сайте?» Это хороший вопрос!

Короче говоря, это потому, что не каждую страницу, существующую на вашем сайте, следует считать отдельной страницей для результатов поиска.(Подробнее об этом позже!)

Ваш первый шаг — убедиться, что на вашем новом сайте есть файл robots.txt. Вы можете сделать это либо по FTP, либо щелкнув свой файловый менеджер через CPanel (или аналогичный, если ваша хостинговая компания не использует CPanel).

Если его там нет, вы можете легко создать его с помощью текстового редактора, такого как Блокнот.

Примечание: Очень важно использовать только текстовый редактор, а не что-то вроде Word или WordPad, которые могут вставлять невидимые коды в ваш документ, что действительно испортит ситуацию.

WordPress-блоггеры могут оптимизировать свои файлы robots.txt с помощью надежного плагина WordPress, такого как плагин Yoast SEO.

Формат файла robots.txt довольно прост. В первой строке обычно указывается пользовательский агент, который представляет собой просто имя поискового бота — например, Googlebot или Bingbot. Вы также можете использовать звездочку (*) в качестве идентификатора подстановочного знака для всех ботов. Этот тип плагина WordPress — эффективный инструмент для веб-мастеров.

Далее идет строка разрешающих или запрещающих команд.Они сообщают поисковым системам, какие части они должны сканировать и индексировать («Разрешить»), а какие — игнорировать («Запрещать»).

Эти правила гарантируют, что только те страницы, которые вы хотите проиндексировать, попадут в результаты поиска.

Итак, напомним: функция robots.txt заключается в том, чтобы сообщать поисковым системам, что делать с контентом / страницами вашего сайта. Но помогает ли это проиндексировать ваш сайт?

Суровый Агравал из ShoutDreams Media говорит:

Да.

Он смог проиндексировать сайты в течение 24 часов, используя комбинацию стратегий, включая роботов.txt и методы SEO на странице.

При этом важно быть очень осторожным при редактировании файла robots.txt, потому что легко ошибиться, если вы не знаете, что делаете.

Неправильно настроенный файл может скрыть весь ваш сайт от поисковых систем. Это полная противоположность тому, что вы хотите! Вы должны понимать, как правильно редактировать файл robots.txt, чтобы не снизить скорость сканирования.

Вы можете нанять опытного разработчика, который позаботится об этой работе, и оставить его в покое, если вам не нравится риск навредить вашему SEO.

Если вы действительно хотите попробовать это самостоятельно, вы можете использовать инструмент Google robots.txt, чтобы убедиться, что ваш файл правильно закодирован.

Шаг 11. Проиндексируйте свой сайт с помощью других поисковых систем

Вы также можете воспользоваться прямым подходом и отправить URL своего сайта в поисковые системы.

Прежде чем вы это сделаете, вы должны знать, что существует множество разногласий по поводу ручной отправки URL сайта как метода индексации сайта.

Некоторые блоггеры полагают, что это как минимум ненужно, если не вредно.

В большинстве случаев, если ваш сайт работает дольше недели, поисковые системы его уже нашли. Отправлять вручную бессмысленно, а платить компаниям за вас — это кража.

Ручная отправка в поисковую систему также может быть вредной, когда вы размещаете свой сайт на сайтах бесплатной отправки, которые предлагают разместить ваш сайт в нескольких поисковых системах. Эти ссылки могут быть некачественными и отрицательно сказаться на вашем SEO.

Видите все эти случайные каталоги и веб-сайты, куда будет отправлен ваш сайт?

Если эти сайты рассматриваются Google как спам, наличие с них ссылок на ваш сайт повредит вашему SEO-рейтингу.Google накажет вас за «привязанность» к этим сайтам.

Поскольку существуют другие методы, которые работают эффективно, большинство блоггеров и владельцев сайтов игнорируют этот шаг.

С другой стороны, это не займет много времени и не повредит вашему SEO, если вы просто отправляете данные в Google, Bing, Yahoo или другие очень уважаемые веб-сайты.

Чтобы отправить URL-адрес вашего сайта в Google, просто попросите Google повторно просканировать ваши URL-адреса с помощью обновления карты сайта или используйте инструмент проверки URL-адресов.

Примечание: раньше Google позволял вам напрямую отправлять URL-адреса для индексации, но теперь этого не делает.

Шаг 12. Поделитесь своим контентом на агрегаторах

Агрегаторы контента — это веб-сайты, которые действуют как поисковая система для контента, отправленного пользователями.

Это означает, что люди отправляют свой контент на эти сайты, а затем посетители могут искать и находить контент от людей со всего мира. Это огромные сети с доступным для поиска контентом.

Хорошо известные примеры — Reddit и Medium.

Размещение вашего контента на агрегаторах — отличный источник ссылок и новых контактов, как и социальные сети.

Некоторые другие агрегаторы, на которых вы можете поделиться своим контентом:

Medium — также отличное место для публикации вашего контента. Для получения более подробной информации ознакомьтесь с моим полным руководством по увеличению посещаемости вашего веб-сайта с помощью Medium.

Шаг 13: Повсюду делитесь ссылкой на свой веб-сайт

Еще один простой способ получить ссылки на ваш новый сайт или блог — это обновления вашего собственного социального статуса.

Конечно, эти ссылки будут nofollow, но они все равно будут учитываться для целей оповещения об индексировании, поскольку мы знаем, что Google и Bing, по крайней мере, отслеживают социальные сигналы с веб-страниц.

Старая поговорка «ваша сеть — это ваш собственный капитал» также применима и здесь. Если вы только начинаете, вашими первыми клиентами могут быть семья, друзья или знакомые, поэтому не стесняйтесь делиться своим новым сайтом в своих личных аккаунтах в социальных сетях.

Если вы используете Pinterest, выберите высококачественное изображение или снимок экрана со своего нового сайта.

Добавьте URL-адрес и оптимизированное описание (т.е. убедитесь, что вы используете подходящие ключевые слова для своего сайта) и закрепите его либо на существующей доске, либо на новой, которую вы создаете для своего сайта.

Мне нравится, как Whole Foods использует Pinterest для взаимодействия со своей целевой аудиторией (например, гурманами и любителями натуральных рецептов). У них есть доски для каждой темы, включая текущие праздники и сезонные тенденции.

Если вы на YouTube, проявите творческий подход! Запишите короткий видеоролик, представляющий ваш сайт и подчеркивающий его особенности и преимущества. Затем добавьте URL-адрес в описание видео.

Social Media Examiner предлагает поместить ваш URL в первую строку описания.

Я также рекомендую использовать правильные ключевые слова в заголовке и описании.

Если у вас есть существующий список рассылки из другой компании, относящейся к той же нише, что и ваш новый сайт, вы можете разослать по всему списку рассылку, представляя ваш новый сайт и включая ссылку.

Джон Морроу, известный по Copyblogger, сделал это со своим новым сайтом Unstoppable.me. Он составил список адресов электронной почты тысяч людей из своих многочисленных предприятий и успешно использовал его для привлечения трафика на свое новое предприятие.

Когда он опубликовал свой первый пост, он разослал электронное письмо своим подписчикам с других своих веб-сайтов, чтобы сообщить им о своем новом сайте.

Он также использовал раздел биографии на своем сайте SmartBlogger, чтобы привлечь трафик на свой новый блог.

Его первая публикация на Unstoppable.me собрала более 60 000 репостов в Facebook и 3 000 репостов в Twitter всего за первый месяц.

Наконец, не забывайте о своей личной учетной записи электронной почты. Добавьте свой новый URL-адрес и имя сайта в подпись электронной почты.Это просто, но работает.

Шаг 14. Настройка RSS-канала

Что такое RSS?

RSS — это автоматический канал содержания вашего веб-сайта, который обновляется, когда вы публикуете новое сообщение в блоге. Это расшифровывается как Really Simple Syndication или Rich Site Summary, и он подходит как пользователям, так и владельцам сайтов.

Как это влияет на индексирование и сканирование?

Что ж, прежде чем мы перейдем к этому, давайте проясним одну вещь: многие думают, что RSS мертв.

Число пользователей неуклонно снижается с тех пор, как Google убил Google Reader в 2013 году.Я думаю, что RSS развивается, а не умирает.

RSS обычно помогает увеличить читаемость и коэффициент конверсии, но он также может помочь проиндексировать ваши страницы .

Для пользователей RSS-каналы предоставляют гораздо более простой способ получить большой объем контента за более короткое время.

Пользователи могут подписаться на ваш RSS-канал в своей любимой программе для чтения RSS и автоматически получать ваши новые сообщения. Популярные программы чтения RSS — Feedly и Feeder.

Как владелец сайта, вы получаете мгновенное распространение нового контента и возможность для читателей подписаться на вас, не отказываясь от своего адреса электронной почты, что не нравится некоторым людям.

Хотя вы по-прежнему хотите сосредоточить большую часть своих усилий на создании списка адресов электронной почты, предложение подписки на RSS-канал улучшает пользовательский опыт, предоставляя людям, заботящимся о конфиденциальности, еще один вариант подписки на вас.

Рассматривая RSS-канал, вы должны следовать нескольким рекомендациям:

• Решите, хотите ли вы показывать полное содержание сообщения или отрывки. Если вы пишете длинное содержание (более 2 000 слов), вам, скорее всего, следует включить в RSS-канал только отрывки.
• Убедитесь, что ваш канал включает изображения , иначе ваши подписчики могут упустить ценную инфографику или другую графику, необходимую для понимания сообщения.

Настройка RSS-канала с помощью Feedburner (собственный инструмент Google для управления RSS) помогает уведомить Google о том, что у вас есть новое сообщение в блоге или страница, готовая к сканированию и индексированию.

Чтобы создать RSS-канал для своего сайта, перейдите на Feedburner. Войдите в свой аккаунт Google.

Введите свой URL-адрес в поле и нажмите Далее.

Дайте своему каналу заголовок и URL-адрес Feedburner (это будет публичный адрес вашего RSS-канала).

После этого вы увидите сообщение об успешном использовании нового URL-адреса Feedburner. Чтобы заставить людей подписаться на него, просто укажите ссылку на этот URL.

Например, у вас может быть кнопка на вашем веб-сайте с надписью «Подписаться через RSS» и ссылкой на этот URL.

Шаг 15: Разместите свой веб-сайт в каталогах

Вы, наверное, уже знаете, что размещение вашего нового URL в каталогах блогов может помочь вашему сайту «найти» новые потенциальные пользователи.Разве я не говорил тебе не делать этого несколько шагов назад?

Дело в том, что ваш веб-сайт можно проиндексировать быстрее, если вы все сделаете правильно.

Давным-давно бесплатные каталоги блогов засоряли цифровой ландшафт. Существовали буквально сотни — если не тысячи — этих сайтов, и большинство из них практически не представляли никакой ценности для читателей блогов.

Проблема качества стала настолько серьезной, что в 2012 году Google удалил многие бесплатные каталоги сайтов из своего индекса, правильно понизив рейтинг веб-страниц с небольшой ценностью контента.

Moz изучил проблему, проанализировав 2678 каталогов, и пришел к заключению, что «из 2678 каталогов только 94 были забанены — не так уж плохо.

Однако было еще 417 дополнительных каталогов, которые избежали блокировки, но были наказаны ».

Так что же ответ?

Если вы собираетесь отправлять в каталоги, убедитесь, что вы отправляете только в авторитетные каталоги с достойным рейтингом.

Списки лучших каталогов, составленные отраслевыми и авторитетными блогами, могут помочь вам отделить хорошее от плохого, но убедитесь, что список, который вы используете, актуален.

Например, этот от Harsh Agrawal был обновлен совсем недавно, в 2019 году.

Другие варианты, которые вы, возможно, захотите изучить, — это TopRank, на котором есть огромный список сайтов, на которые вы можете отправить свой RSS-канал и блог; Technorati, который является одним из лучших каталогов блогов; и — после того, как вы опубликовали приличное количество высококачественного контента — субдомен Alltop для вашей ниши или отрасли.

Отправка на высококачественные сайты с приличными рейтингами авторитета домена может не только открыть ваш контент для совершенно новой аудитории, но также предоставить входящие ссылки, которые могут подтолкнуть поисковые системы к сканированию и индексации вашего сайта.

Самый простой способ разместить свой сайт сразу в нескольких каталогах — воспользоваться бесплатным сервисом Ping O Matic.

Ping O Matic уведомляет каталоги о том, что ваш веб-сайт изменился и что они должны его проиндексировать. Это займет около 30 секунд, и вот как это сделать.

Введите название вашего блога, URL-адрес домашней страницы и URL-адрес RSS (если он у вас есть), как это. В разделе Services to Ping выберите каталоги, которые подходят для вашего сайта:

Нажмите «Отправить пинг», и все готово.

Шаг 16. Часто проверяйте ошибки сканирования Google

Этот шаг действительно важен для поддержания частоты индексирования. Я люблю проверять свои веб-сайты на наличие ошибок сканирования хотя бы раз в месяц.

Чтобы проверить наличие ошибок сканирования, откройте Search Console.

Слева нажмите «Настройки»> «Статистика сканирования»> «Открыть отчет».

На странице статистики сканирования вы можете узнать, как часто Google индексирует ваш веб-сайт, и это определенно то, за чем нужно следить.

Например, если мои результаты растут, это означает, что Google теперь индексирует меня чаще — это хорошо. Но если ваш график имеет тенденцию к снижению, это может быть признаком того, что вам нужно опубликовать больше контента или отправить новую карту сайта.

Затем посмотрите в разделе «Индекс» и нажмите «Покрытие».

На этом экране отображаются все ошибки, с которыми робот Googlebot столкнулся при сканировании вашего сайта, например ошибки 404.

Вот то, что вам следует отслеживать хотя бы раз в месяц:

• Ошибки сканирования
• Среднее время отклика
• Статистика сканирования

Еще один отличный инструмент, которым можно воспользоваться, — это тестер структурированных данных.Google использует структурированные данные, чтобы лучше понять, о чем ваш сайт.

Структурированные данные в основном означают, что вы предоставляете Google релевантную информацию, чтобы помочь ответить на вопросы пользователей.

Вот пример. Я искал концерты рядом со мной.

Этот веб-сайт использовал структурированные данные, чтобы сообщить Google, что эти списки будут полезны для меня, и они отображаются под своим обычным заголовком и описанием страницы SEO.

Так как вы это тоже получили?

Он довольно продвинутый, так что это может быть еще один элемент, который вы захотите передать на аутсорсинг разработчику.

Вы можете увидеть все варианты структурированных данных в галерее поиска Google.

У Google также есть упрощенный инструмент, который помогает людям, не являющимся разработчиками, добавлять структурированные данные на свои сайты. Перейдите в Помощник по разметке структурированных данных и введите информацию о своем веб-сайте.

Затем вам просто нужно выделить элемент на веб-странице, который вы хотите преобразовать в структурированные данные.

Из всплывающего меню вы можете добавить такие атрибуты, как Автор, Дата публикации, Изображение, URL-адрес, Тело статьи и т. Д.

Если вы внедрили структурированные данные, вы можете использовать инструмент тестирования для их проверки.

Опять же, это довольно сложный процесс, поэтому, если вы не разработчик, вероятно, лучше всего нанять профессионала, который позаботится об этом за вас.

Шаг 17. Убедитесь, что страницы, которые не следует индексировать, не

Есть некоторые страницы, которые вы не хотите, чтобы Google или другие поисковые системы индексировали. Вот страницы, которые вы не хотите показывать в поиске:

Страницы с благодарностью: Обычно это страницы, на которые кто-то попадает после подписки на ваш список рассылки или загрузки электронной книги.Вы же не хотите, чтобы люди проходили мимо очереди и сразу переходили к товарам! Если эти страницы будут проиндексированы, вы потеряете потенциальных клиентов, заполнивших форму.

Повторяющееся содержание: Если какие-либо страницы вашего сайта имеют повторяющееся содержание или немного отличаются друг от друга, например, страница, для которой вы проводите A / B-тест, вы не хотите, чтобы это индексировалось.

Скажем, например, у вас есть две страницы с одинаковым содержанием на вашем сайте. Возможно, это связано с тем, что вы проводите сплит-тестирование визуальных элементов своего дизайна, но содержание двух страниц совершенно одинаково.

Дублированный контент, как вы, наверное, знаете, потенциально может стать проблемой для SEO. Итак, одно из решений — использовать файл robots.txt, чтобы поисковые системы игнорировали один из них.

Вот как сделать так, чтобы страницы, которые вы хотите исключить, не индексировались.

Вариант 1. В вашем файле robots.txt

Помните тот файл robots.txt, который мы создали на шаге 10? Вы можете добавить в него директивы, чтобы поисковые системы не индексировали файл или весь каталог. Это может быть удобно, если вы хотите, чтобы целый раздел вашего сайта оставался неиндексированным.

Чтобы добавить это, откройте файл robots.txt.

См. Шаг 10, чтобы узнать, как это сделать, если вам нужно напомнить.

Чтобы заблокировать индексирование страницы, введите этот код в файл robots.txt.

Запретить: / nameoffolder /

Блокирует все в этой папке. В качестве альтернативы вы можете просто заблокировать один файл.

Запрещено: /folder/filename.html

Сохраните его, повторно загрузите на свой сервер и все. Для получения дополнительной информации о robots.txt, посетите robotstxt.org.

Вариант 2. Используйте ссылки nofollow или noindex

Этот вариант очень прост. Когда вы создаете ссылку на своем сайте, просто добавьте тег nofollow или noindex к ссылке .

Во-первых, давайте рассмотрим, что они означают.

Nofollow: Указывает Google не сканировать ссылки на этой странице.

Это означает, что если я перейду на ваш сайт с neilpatel.com и использую ссылку nofollow, ни один из моих ссылок (или авторитет домена) не будет передан вам.

Noindex: Указывает Google не индексировать страницу, даже если паук ее видит. Он не будет добавлен в результаты поиска.

Вы можете использовать оба одновременно.

Вот пример.

Если вы делаете ссылку на специальную целевую страницу мероприятия, которое проводите только для VIP-персон, и не хотите, чтобы эта страница отображалась в результатах поиска, вы должны указать ссылку на нее с помощью тега noindex.

Это будет выглядеть так: Посмотрите мой супер крутое событие .

Даже если люди будут искать в Google «супер крутое мероприятие Нила», эта страница не появится.

(Вы, однако, получите много вариантов концертов, посвященных памяти Нила Даймонда.)

Чаще всего вам понадобится тег noindex. Обычно вы хотите использовать nofollow только для партнерских ссылок, ссылок, за создание которых вам кто-то заплатил, или для которых вы получаете комиссию. Это потому, что вы не хотите «продавать ссылки».

Когда вы добавляете nofollow, он сообщает Google не передавать полномочия вашего домена этим источникам.По сути, он защищает Интернет от повреждений, когда дело доходит до ссылок.

Если вы хотите, чтобы вся страница была исключена из результатов поиска из всех источников, вместо того, чтобы просто включать теги nofollow или noindex в свои ссылки, выполните следующие действия.

Сначала откройте HTML-код страницы.

Если вы используете CMS (систему управления контентом), такую ​​как WordPress, вы можете отредактировать этот файл с помощью Yoast, чтобы добавить тег noindex.

Если у вас нет такой CMS, как WordPress, вы можете загрузить страницу, которую нужно отредактировать, через FTP.

Не знаете, как использовать FTP? Вернитесь к шагу 2, где я это объясню!

Нажмите на страницу, которую хотите исключить из результатов поиска, и загрузите ее.

Откройте его в текстовом редакторе. Блокнот для Windows или TextEdit на Mac отлично подходят для этого. Найдите тег, например:

Прямо перед этим тегом вы хотите вставить ОДИН из следующих фрагментов кода.

Если вы хотите, чтобы страница была исключена из результатов поиска, но по-прежнему переходила по ссылкам на странице, используйте:

Если вы хотите, чтобы страница включалась в результаты поиска, но чтобы Google не переходил по ссылкам на странице, используйте:

И, если вы хотите, чтобы страница была исключена из поиска И чтобы Google не переходил по ссылкам, используйте:

Как это:

Шаг 18. Составьте план обновления старого содержимого

Итак, что мы узнали об индексировании?

Каждый раз, когда вы обновляете свой веб-сайт, Google хочет сканировать его чаще.

Отличный способ заработать на этом — составить план регулярного обновления старого контента.

Именно этим я сейчас и занимаюсь с этим мега-сообщением!

Этот пост был первоначально опубликован в 2015 году, и я стараюсь обновлять его по крайней мере каждые несколько месяцев или, когда происходят серьезные изменения в Google, чтобы поддерживать его в актуальном состоянии.

Информация быстро устаревает, особенно в быстро меняющемся мире маркетинга. Каждый месяц я составляю список своих старых постов и выбираю несколько, чтобы обновить их свежей информацией и советами.Редактируя хотя бы несколько постов в месяц, я гарантирую, что мой контент останется актуальным и полезным.

Для наилучшего влияния на скорость индексации старайтесь обновлять свой веб-сайт не реже трех раз в неделю. Этими тремя вещами могут быть публикация одного нового сообщения в блоге и обновление содержимого двух старых сообщений.

Обновление по крайней мере три раза в неделю говорит Google, что лучше часто проверять у вас, чтобы убедиться, что на нем установлена ​​последняя версия вашего сайта.

Вся эта индексация и новая информация означает, что обновление ваших старых сообщений может увеличить ваш органический поисковый трафик на 111%!

Вот несколько простых способов обновить старый контент.

Проверьте устаревшие факты или термины: Например, в этом сообщении упоминались инструменты Google для веб-мастеров, которые теперь называются Search Console.

Ссылка на свежие источники информации: Если вы написали сообщение о SEO в 2013 году и использовали в своем сообщении данные того же года, тогда это нормально, но не в 2017 году. Обновите свои оценки и вспомогательную информацию, чтобы они были свежими.

Неработающие ссылки / новые ссылки: Проверьте неработающие ссылки и исправьте их, или при необходимости измените любые ссылки в вашем сообщении на более качественные источники.Например, я могу перенаправить старые ссылки на свежий, новый контент на моем собственном сайте.

Ссылка на другой ваш контент: Включите ссылки на новые сообщения или соответствующий контент, который вы опубликовали после исходного сообщения. Большинство блогеров делают это так:

Связанный: SEO мертв?

Обновите свои точки зрения: Это важно. Просмотрите старые сообщения и обновите свои рекомендации до более актуальных, если необходимо. Вещи меняются! То же самое и с решениями, которые вы предлагаете людям.

Часто задаваемые вопросы о сайте индексирования Google

Какие факторы индексации сайта важны?

Скорость сканирования, способность Google и других поисковых систем индексировать и сканировать ваш сайт, а также ошибки, обнаруженные Google (см. Консоль поиска Google)

Как Google индексирует ваш сайт?

Google использует внутренние ссылки и карты сайта для сканирования вашего сайта. Вы можете отправить карту сайта своего сайта в Google Search Console.

Насколько важен контент-маркетинг для индексации вашего сайта Google?

Увеличение посещаемости ваших страниц может помочь им проиндексировать.Создайте стратегию контент-маркетинга и цели для увеличения вашего трафика.

Какие области контентной стратегии важны для моего нового сайта?

Определите свои цели, целевую аудиторию, типы контента, частоту публикации, систему управления контентом и инструменты, которые вы будете использовать для публикации и продвижения контента.

Google Индексирует ваш сайт Заключение

Надеюсь, вам понравилось это подробное руководство по индексации вашего сайта!

Я знаю, что это очень важно. Я и половины этого не знал, когда начал вести блог.

В моем первом блоге я установил Google Analytics, и все!

Конечно, тогда у нас не было такого количества возможностей для улучшения нашего SEO-рейтинга или индексации, и это не управлялось сложным алгоритмом, как сейчас.

Вот почему я написал это руководство. При запуске нового веб-сайта очень важно изучить SEO и индексацию, особенно в условиях всей конкуренции.

Можно занять место на первой странице и «победить больших парней», но для этого требуется много работы и исследований.

Лучший совет, который у меня есть:

Продолжайте учиться и будьте в курсе новостей отрасли. Все меняется так быстро, особенно когда дело касается поисковых систем.

Изучите SEO и перепроверьте любой новый предложенный метод с помощью собственного независимого исследования, прежде чем пробовать его.

Убедитесь, что вы часто обновляете свой сайт — не только с новым содержанием, но и с обновлением старых сообщений. Это заставляет Google возвращаться, чтобы часто сканировать ваш сайт, и сохраняет эти сообщения актуальными для новых посетителей.

Затем составьте план цифрового маркетинга.

Запишите свой план контент-маркетинга, включая то, как вы будете отслеживать индексирование, аналитику и как вы будете обновлять старую информацию на своем сайте. Для меня не было бы возможности расти так быстро, как я, без письменного плана.

Наконец, получите профессиональную помощь в области SEO, если она вам нужна. Не у всех владельцев бизнеса есть время, чтобы оставаться на вершине маркетинга, тем более, что он так быстро меняется. Профессионал часто может получить результаты намного быстрее — и фактически сэкономить ваши деньги в долгосрочной перспективе.

Какую тактику сканирования и индексирования вы пробовали? Каковы были ваши результаты?

Узнайте, как мое агентство может привлечь огромное количество трафика на ваш веб-сайт

• SEO — разблокируйте огромное количество SEO-трафика. Смотрите реальные результаты.
• Контент-маркетинг — наша команда создает эпический контент, которым будут делиться, получать ссылки и привлекать трафик.
• Paid Media — эффективные платные стратегии с четкой окупаемостью инвестиций.

Заказать звонок

10 способов заставить Google индексировать ваш сайт (которые на самом деле работают)

Если Google не индексирует ваш сайт, вы в значительной степени невидимы. Вы не будете отображаться ни по каким поисковым запросам и вообще не получите никакого органического трафика. Пшик. Нада. Нуль.

Учитывая, что вы здесь, я полагаю, это не новость для вас. Итак, приступим непосредственно к делу.

В этой статье рассказывается, как решить любую из этих трех проблем:

1. Весь ваш веб-сайт не проиндексирован.
2. Некоторые из ваших страниц проиндексированы, а другие нет.
3. Ваши недавно опубликованные веб-страницы не индексируются достаточно быстро.

Но сначала давайте удостоверимся, что мы находимся на одной странице и полностью понимаем эту ошибку индексирования.

Новичок в SEO? Ознакомьтесь с нашим

Что такое сканирование и индексирование?

Google обнаруживает новые веб-страницы с помощью , просматривая сети, а затем они добавляют эти страницы в свой индекс . Они делают это с помощью веб-паука под названием Googlebot .

Запутались? Давайте определим несколько ключевых терминов.

• Сканирование : процесс перехода по гиперссылкам в Интернете для обнаружения нового контента.
• Индексирование : процесс сохранения каждой веб-страницы в обширной базе данных.
• Web spider : Часть программного обеспечения, разработанная для выполнения процесса сканирования в любом масштабе.
• Googlebot : веб-паук Google .

Вот видео от Google, которое объясняет этот процесс более подробно:

https: // www.youtube.com/watch?v=BNHR6IQJGZs

Когда вы что-то гуглите, вы просите Google вернуть все соответствующие страницы из их индекса. Поскольку часто есть миллионы страниц, отвечающих всем требованиям, алгоритм ранжирования Google делает все возможное, чтобы отсортировать страницы так, чтобы вы сначала увидели наилучшие и наиболее релевантные результаты.

Важный момент, который я здесь подчеркиваю, заключается в том, что , индексирование и , ранжирование — это две разные вещи .

Индексирование отображается для гонки; рейтинг выигрывает.

Невозможно выиграть, не заняв первое место в гонке.

Как проверить, проиндексированы ли вы в Google

Зайдите в Google, затем найдите site: yourwebsite.com

Это число примерно показывает, сколько ваших страниц проиндексировал Google.

Если вы хотите проверить статус индекса определенного URL, используйте тот же сайт : yourwebsite.com/web-page-slug .

Никаких результатов не будет, если страница не проиндексирована.

Стоит отметить, что если вы пользователь Google Search Console, вы можете использовать отчет Coverage , чтобы получить более точное представление о статусе индекса вашего веб-сайта. Просто перейдите по ссылке:

Google Search Console> Индекс> Покрытие

Посмотрите количество допустимых страниц (с предупреждениями и без них).

Если в сумме эти два числа не равны нулю, значит, Google проиндексировал по крайней мере некоторые страницы вашего веб-сайта. В противном случае у вас серьезная проблема, потому что ни одна из ваших веб-страниц не проиндексирована.

Примечание.

Не пользуетесь Google Search Console? Зарегистрироваться. Это бесплатно. Каждый, кто управляет веб-сайтом и заботится о привлечении трафика от Google, должен использовать Google Search Console. Это , что важно для .

Вы также можете использовать Search Console, чтобы проверить, проиндексирована ли конкретная страница. Для этого вставьте URL-адрес в инструмент проверки URL-адресов.

Если эта страница проиндексирована, будет написано «URL находится в Google».

Если страница не проиндексирована, вы увидите слова «URL не в Google.”

Как получить индекс в Google

Вы обнаружили, что ваш веб-сайт или веб-страница не проиндексированы в Google? Попробуйте следующее:

1. Перейдите в консоль поиска Google
2. Перейдите к инструменту проверки URL-адресов
3. Вставьте URL-адрес, который Google должен проиндексировать, в строку поиска.
4. Подождите, пока Google проверит URL-адрес
5. Нажмите кнопку «Запросить индексирование»

Этот процесс является хорошей практикой при публикации нового сообщения или страницы. Вы фактически сообщаете Google, что добавили что-то новое на свой сайт и что они должны это изучить.

Однако запрос индексации вряд ли решит основные проблемы, мешающие Google индексировать старые страницы. В этом случае следуйте приведенному ниже контрольному списку, чтобы диагностировать и устранить проблему.

Вот несколько быстрых ссылок на каждую тактику — на случай, если вы уже попробовали:

1. Удалите блоки сканирования в файле robots.txt
2. Удалите ложные теги noindex
3. Включите страницу в карту сайта
4. Удалите мошеннические канонические теги
5. Убедитесь, что страница не потеряна. )
6. Создавайте качественные обратные ссылки

1) Удалите блоки сканирования в ваших роботах.txt файл

Google не индексирует весь ваш веб-сайт? Это могло произойти из-за блокировки сканирования в файле robots.txt.

Чтобы проверить наличие этой проблемы, перейдите по адресу yourdomain.com/robots.txt .

Найдите любой из этих двух фрагментов кода:

 User-agent: Googlebot
Disallow: / 

 Агент пользователя: *
Disallow: / 

Обе из них сообщают роботу Googlebot, что им запрещено сканировать какие-либо страницы вашего сайта. Чтобы решить проблему, удалите их.Это , что просто.

Блок сканирования в robots.txt также может быть причиной, если Google не индексирует одну веб-страницу. Чтобы проверить, так ли это, вставьте URL-адрес в инструмент проверки URL-адресов в Google Search Console. Щелкните блок «Покрытие», чтобы получить более подробную информацию, затем найдите «Сканирование разрешено? Нет: заблокировано файлом robots.txt ».

Это означает, что страница заблокирована в robots.txt.

В таком случае еще раз проверьте файл robots.txt на наличие каких-либо запрещающих правил, относящихся к странице или соответствующему подразделу.

При необходимости удалите.

2) Удалите ложные теги noindex

Google не будет индексировать страницы, если вы им запретите. Это полезно для сохранения конфиденциальности некоторых веб-страниц. Это можно сделать двумя способами:

Метод 1: метатег

Страницы с любым из этих метатегов в разделе не будут проиндексированы Google:

Это метатег роботов, который сообщает поисковым системам, могут ли они индексировать страницу.

Примечание.

Ключевой частью является значение «noindex». Если вы это видите, значит для страницы задано значение noindex.

Чтобы найти все страницы с метатегом noindex на вашем сайте, запустите сканирование с помощью Ahrefs Site Audit. Перейдите к отчету Индексируемость . Ищите предупреждения «Страница Noindex».

Щелкните, чтобы увидеть все затронутые страницы. Удалите метатег noindex со всех страниц, которым он не принадлежит.

Метод 2: X ‑ Robots-Tag

Сканеры также учитывают заголовок HTTP-ответа X ‑ Robots-Tag.Вы можете реализовать это, используя язык сценариев на стороне сервера, такой как PHP, или в файле .htaccess, или изменив конфигурацию сервера.

Инструмент проверки URL в Search Console сообщает, заблокирован ли Google сканирование страницы из-за этого заголовка. Просто введите свой URL и найдите «Индексирование разрешено? Нет: «noindex» обнаружен в http-заголовке «X ‑ Robots-Tag»

Если вы хотите проверить наличие этой проблемы на своем сайте, запустите сканирование в инструменте аудита сайта Ahrefs, затем используйте «Информация о роботах в HTTP-заголовке. »В проводнике страниц:

Попросите разработчика исключить страницы, которые вы хотите проиндексировать, из возврата этого заголовка.

Рекомендуемая литература: Спецификации метатега роботов и HTTP-заголовка X ‑ Robots-Tag

3) Включите страницу в карту сайта

Карта сайта сообщает Google, какие страницы на вашем сайте важны, а какие нет т. Это также может дать некоторые рекомендации о том, как часто их следует сканировать повторно.

Google должен иметь возможность находить страницы на вашем веб-сайте независимо от того, есть ли они в вашей карте сайта, но все же рекомендуется включать их.В конце концов, нет смысла усложнять жизнь Google.

Чтобы проверить, есть ли страница в вашей карте сайта, используйте инструмент проверки URL в Search Console. Если вы видите ошибку «URL не в Google» и «Sitemap: N / A», значит, его нет в вашей карте сайта или он не проиндексирован.

Не используете Search Console? Перейдите по URL-адресу вашей карты сайта — обычно yourdomain.com/sitemap.xml — и выполните поиск страницы.

Или, если вы хотите найти все просканируемые и индексируемые страницы, которых нет в вашей карте сайта, запустите сканирование в Ahrefs Site Audit.Перейдите в Page Explorer и примените эти фильтры:

Эти страницы должны быть в вашей карте сайта, поэтому добавьте их. После этого сообщите Google, что вы обновили карту сайта, выполнив ping по этому URL:

http://www.google.com/ping?sitemap=http://yourwebsite.com/sitemap_url.xml

Replace эту последнюю часть с URL вашей карты сайта. Вы должны увидеть что-то вроде этого:

Это должно ускорить индексацию страницы Google.

4) Удалите ложные канонические теги

Канонический тег сообщает Google, какая версия страницы является предпочтительной.Выглядит это примерно так:

Большинство страниц либо не имеют канонического тега, либо так называемого канонического тега, ссылающегося на себя. Это говорит Google сама страница является предпочтительной и, вероятно, единственной версией. Другими словами, вы хотите, чтобы эта страница была проиндексирована.

Но если на вашей странице есть ложный канонический тег, то он может сообщать Google о предпочтительной версии этой страницы, которая не существует. В этом случае ваша страница не будет проиндексирована.

Чтобы проверить каноничность, воспользуйтесь инструментом Google для проверки URL. Вы увидите предупреждение «Альтернативная страница с каноническим тегом», если канонический тег указывает на другую страницу.

Если этого не должно быть и вы хотите проиндексировать страницу, удалите канонический тег.

ВАЖНО

Канонические теги не всегда плохи. У большинства страниц с этими тегами есть причины. Если вы видите, что ваша страница имеет канонический набор, проверьте каноническую страницу. Если это действительно предпочтительная версия страницы и нет необходимости также индексировать данную страницу, то канонический тег должен остаться.

Если вы хотите быстро найти ложные канонические теги на всем сайте, запустите сканирование с помощью инструмента аудита сайта Ahrefs. Перейдите в проводник страниц. Используйте следующие настройки:

Это ищет страницы в вашей карте сайта с несамодвижущимися каноническими тегами. Поскольку вы почти наверняка захотите проиндексировать страницы в карте сайта, вам следует дополнительно изучить, возвращает ли этот фильтр какие-либо результаты.

Очень вероятно, что у этих страниц либо ненадежный канонический файл, либо их вообще не должно быть в вашей карте сайта.

5) Убедитесь, что страница не «осиротевшая».

Сиротские страницы — это страницы без внутренних ссылок, указывающих на них.

Поскольку Google обнаруживает новое содержание, сканируя Интернет, они не могут обнаружить потерянные страницы с помощью этого процесса. Посетители веб-сайта тоже не смогут их найти.

Чтобы проверить наличие лишних страниц, просканируйте свой сайт с помощью Ahrefs Site Audit. Затем проверьте отчет Links на наличие ошибок «Потерянная страница (нет входящих внутренних ссылок)»:

Здесь показаны все страницы, которые одновременно индексируются и присутствуют в вашей карте сайта, но не имеют внутренних ссылок, указывающих на них.

ВАЖНО

Этот процесс работает только в том случае, если верны два условия:

1. Все страницы, которые вы хотите проиндексировать, находятся в ваших файлах Sitemap
2. Вы установили флажок, чтобы использовать страницы в ваших файлах Sitemap в качестве отправных точек для сканирования при настройке. проект в Ahrefs Site Audit.

Не уверены, что все страницы, которые вы хотите проиндексировать, есть в вашей карте сайта? Попробуйте следующее:

1. Загрузите полный список страниц вашего сайта (через вашу CMS)
2. Просканируйте ваш сайт (используя такой инструмент, как Ahrefs Site Audit)
3. Сделайте перекрестные ссылки на два списка URL-адресов

Любые URL-адреса не обнаружены во время сканирования, являются потерянными страницами.

Вы можете исправить потерянные страницы одним из двух способов:

1. Если страница не важна , удалите ее и удалите из карты сайта.
2. Если страница важна , включите ее во внутреннюю структуру ссылок вашего веб-сайта.

6) Исправить внутренние ссылки nofollow

Ссылки Nofollow — это ссылки с тегом rel = «nofollow». Они предотвращают передачу PageRank на целевой URL. Google также не сканирует ссылки nofollow.

Вот что Google говорит по этому поводу:

По сути, с использованием nofollow заставляет нас отбрасывать целевые ссылки из нашего общего графа сети. Однако целевые страницы могут по-прежнему отображаться в нашем индексе, если другие сайты ссылаются на них без использования nofollow или если URL-адреса отправляются в Google в файле Sitemap.

Короче говоря, вы должны убедиться, что следуют все внутренние ссылки на индексируемые страницы.

Для этого используйте инструмент Ahrefs Site Audit для сканирования вашего сайта.Проверьте отчет Links на предмет индексируемых страниц с ошибками «Страница имеет только входящие внутренние ссылки nofollow»:

Удалите тег nofollow из этих внутренних ссылок, предполагая, что вы хотите, чтобы Google проиндексировал страницу. Если нет, либо удалите страницу, либо не индексируйте ее.

Рекомендуемая литература: Что такое ссылка Nofollow? Все, что вам нужно знать (без жаргона!)

7) Добавьте «мощные» внутренние ссылки

Google обнаруживает новый контент, сканируя ваш веб-сайт.Если вы не укажете внутреннюю ссылку на рассматриваемую страницу, они не смогут ее найти.

Одно из простых решений этой проблемы — добавить на страницу несколько внутренних ссылок. Вы можете сделать это с любой другой веб-страницы, которую Google может сканировать и индексировать. Однако, если вы хотите, чтобы Google проиндексировал страницу как можно быстрее, имеет смысл сделать это с одной из ваших наиболее «мощных» страниц.

Почему? Потому что Google, вероятно, будет повторно сканировать такие страницы быстрее, чем менее важные страницы.

Для этого перейдите в раздел «Сайт» Ahrefs «, введите свой домен и перейдите в отчет Лучшее по ссылкам .

Здесь показаны все страницы вашего веб-сайта, отсортированные по рейтингу URL (UR). Другими словами, сначала отображаются наиболее авторитетные страницы.

Просмотрите этот список и найдите соответствующие страницы, с которых можно добавить внутренние ссылки на рассматриваемую страницу.

Например, если бы мы хотели добавить внутреннюю ссылку на наше руководство по размещению гостевых сообщений, наше руководство по созданию ссылок, вероятно, предложило бы подходящее место для этого. Так получилось, что эта страница является 11-й по значимости страницей в нашем блоге:

Google увидит эту ссылку и перейдет по ней в следующий раз при повторном сканировании страницы.

pro tip

Вставьте страницу, с которой вы добавили внутреннюю ссылку, в инструмент проверки URL-адресов Google. Нажмите кнопку «Запросить индексирование», чтобы сообщить Google, что что-то на странице изменилось и что они должны повторно сканировать это как можно скорее. Это может ускорить процесс обнаружения внутренней ссылки и, следовательно, страницы, которую вы хотите проиндексировать.

8) Убедитесь, что страница ценная и уникальная

Google вряд ли будет индексировать некачественные страницы, потому что они не представляют ценности для пользователей.Вот что сказал об индексировании в 2018 году Джон Мюллер из Google:

Мы никогда не индексируем все известные URL, это нормально. Я бы сфокусировался на том, чтобы сделать сайт потрясающим и вдохновляющим, тогда все обычно получается лучше.

— 🍌 John 🍌 (@JohnMu) 3 января 2018 г.

Он подразумевает, что если вы хотите, чтобы Google проиндексировал ваш веб-сайт или веб-страницу, он должен быть «потрясающим и вдохновляющим».

Если вы исключили технические проблемы из-за отсутствия индексации, то причиной может быть отсутствие ценности.По этой причине стоит просмотреть страницу свежим взглядом и спросить себя: действительно ли эта страница ценна? Сможет ли пользователь найти ценность на этой странице, если щелкнет по ней в результатах поиска?

Если ответ на любой из этих вопросов отрицательный, то вам необходимо улучшить свой контент.

Вы можете найти больше потенциально некачественных страниц, которые не проиндексированы, с помощью инструмента аудита сайта Ahrefs и профилировщика URL. Для этого перейдите в Page Explorer в Ahrefs Site Audit и используйте следующие настройки:

Это вернет «тонкие» страницы, которые можно индексировать и которые в настоящее время не получают органического трафика.Другими словами, есть большая вероятность, что они не проиндексированы.

Экспортируйте отчет, затем вставьте все URL-адреса в URL Profiler и запустите проверку индексации Google.

ВАЖНО

Рекомендуется использовать прокси, если вы делаете это для большого количества страниц (т. Е. Более 100). В противном случае вы рискуете, что ваш IP-адрес будет забанен Google. Если вы не можете этого сделать, другой альтернативой является поиск в Google «бесплатной массовой проверки индексации Google». Есть несколько таких инструментов, но большинство из них ограничено <25 страницами за раз.

Проверьте все не проиндексированные страницы на предмет проблем с качеством. При необходимости улучшите, а затем запросите переиндексацию в Google Search Console.

Вы также должны стремиться исправить проблемы с дублирующимся контентом. Google вряд ли проиндексирует повторяющиеся или почти повторяющиеся страницы. Используйте отчет «Дублированное содержимое » в программе «Аудит сайта», чтобы проверить наличие этих проблем.

9) Удалите некачественные страницы (чтобы оптимизировать «краулинговый бюджет»).

Слишком много некачественных страниц на вашем сайте приводит только к потере краулинга.

Вот что Google говорит по этому поводу:

Потеря ресурсов сервера на [малоценных страницах] приведет к истощению активности сканирования со страниц, которые действительно имеют ценность, что может вызвать значительную задержку в обнаружении качественного контента на сайте. .

Думайте об этом как об учителе, оценивающем эссе, одно из которых ваше. Если им предстоит оценить десять эссе, они довольно быстро доберутся до вашего. Если у них будет сотня, им потребуется немного больше времени. Если у них тысячи, их рабочая нагрузка слишком высока, и они, возможно, никогда не дойдут до оценки вашего эссе.

Google заявляет, что «сканирование бюджета […] — это не то, о чем должно беспокоиться большинство издателей», и что «если на сайте меньше нескольких тысяч URL-адресов, в большинстве случаев он будет сканироваться эффективно».

Тем не менее, удаление некачественных страниц с вашего веб-сайта никогда не бывает плохим. Это может только положительно повлиять на краулинговый бюджет.

Вы можете использовать наш шаблон аудита контента, чтобы найти потенциально некачественные и нерелевантные страницы, которые можно удалить.

10) Создавайте качественные обратные ссылки

Обратные ссылки говорят Google, что веб-страница важна.В конце концов, если кто-то на него ссылается, значит, он должен иметь определенную ценность. Это страницы, которые Google хочет проиндексировать.

Для полной прозрачности Google индексирует не только веб-страницы с обратными ссылками. Есть много (миллиарды) проиндексированных страниц без обратных ссылок. Однако, поскольку Google считает страницы с качественными ссылками более важными, они, скорее всего, будут сканировать — и повторно сканировать — такие страницы быстрее, чем те, у которых нет. Это приводит к более быстрой индексации.

У нас есть много ресурсов для создания качественных обратных ссылок в блоге.

Взгляните на несколько руководств ниже.

Индексирование ≠ рейтинг

Индексирование вашего веб-сайта или веб-страницы в Google не означает рейтинга или трафика.

Это разные вещи.

Индексирование означает, что Google знает о вашем веб-сайте. Это не значит, что они будут ранжировать его по каким-либо релевантным и стоящим запросам.

Вот где приходит SEO — искусство оптимизации ваших веб-страниц для ранжирования по конкретным запросам.

Короче говоря, SEO включает:

• Поиск того, что ищут ваши клиенты;
• Создание контента по этим темам;
• Оптимизация этих страниц под ваши целевые ключевые слова;
• Создание обратных ссылок;
• Регулярно переиздайте контент, чтобы он оставался «вечнозеленым».”

Вот видео, которое поможет вам начать работу с SEO:

Как проиндексировать ваш сайт в Google

1. Создайте карту сайта

Как следует из названия, карта сайта — это карта вашего сайта. Это документ в формате XML, который сообщает поисковым роботам, куда им можно, а что нельзя.

Сканер просматривает эту страницу, чтобы узнать все о вашем веб-сайте — насколько он велик, какие страницы наиболее важны и где находится новый контент.Карта сайта в формате XML — важнейший первый ингредиент успешной индексации.

Пауки умны, но им действительно нужна карта.

Почему?

Без карты сайта сканирование может занять много времени — до 24 часов, чтобы проиндексировать новое сообщение в блоге или веб-сайт.

Это слишком долго.

С помощью карты сайта вы можете сократить это время до нескольких минут.

Верно: ваш веб-сайт, блог или новая страница могут быть проиндексированы Google менее чем за час.

Ваша карта сайта также сообщает Google, как часто нужно искать изменения и новые страницы на вашем сайте. Если вы не обновляете или не добавляете новый контент часто, возможно, ваш сайт не будет сканироваться каждые несколько часов.

Но если вы добавляете несколько сообщений в блог каждую неделю, регулярно добавляете страницы с новыми продуктами или публикуете срочные новостные статьи, вы захотите сообщить Google, чтобы он сканировал и индексировал ваш сайт чаще.

К счастью, создать карту сайта зачастую проще, чем звуки.Если вы используете указанный выше плагин Yoast, вы можете перейти к следующему шагу.

А если нет, есть несколько других инструментов, которые могут сканировать ваш сайт и давать аналогичные результаты.

Кричащая лягушка

Один из лучших вариантов для создания карты сайта XML — Screaming Frog .

Чтобы использовать Screaming Frog, сначала загрузите их инструмент SEO Spider.

Если на вашем сайте меньше 500 страниц, это совершенно бесплатно.

Если ваш сайт больше, вам нужно будет купить лицензию, которая может окупиться, если учесть время, которое потребуется на ручной поиск и перечисление 500+ URL-адресов.

После того, как вы установили программу , введите свой URL-адрес в поле «Введите URL-адрес для паука» и нажмите «Пуск».

Затем нажмите «Карты сайта»> «Создать XML-карту сайта».

Перед тем, как создать карту сайта, вы можете настроить несколько параметров.

Во-первых, вам нужно определить, какие страницы вы хотите включить, а какие — исключить.

По умолчанию будут включены только страницы с ответом OK при сканировании «200», поэтому вам не нужно беспокоиться о перенаправлениях или неработающих ссылках.

Тем не менее, вы можете прокрутить список страниц и найти дублированный контент. Например, в вашей карте сайта нет необходимости иметь как WWW, так и не WWW версии URL.

Вы можете решить эту проблему, щелкнув правой кнопкой мыши версию, которую хотите удалить, и выбрав «Удалить».

Если ваши страницы различаются по важности, вы можете выбрать установку значений приоритета для разных URL-адресов. Ваши URL-адреса могут находиться в диапазоне от 0,0 до 1,0, значение по умолчанию — 0,5.

Это сообщает Google, какие страницы являются наиболее важными, чтобы они могли сканировать и индексировать эти страницы чаще.

Важно отметить, однако, что установка значений приоритета , а не не влияет на ваш рейтинг, так что вам не будет никакой пользы от попытки обыгрывать систему здесь.

Затем вы можете сообщить Google, как часто каждая страница вашего сайта может изменяться. Это сигнализирует поисковым роботам, что им следует сосредоточиться на сканировании часто обновляемых страниц.

Установка частоты изменения сотен страниц может быть утомительной, но вы можете использовать функцию «Вычислить из последнего измененного заголовка» Screaming Frog, чтобы автоматизировать процесс.

Это означает, что если заголовок страницы был изменен в предыдущие 24 часа, частота его изменения будет ежедневной, а если она не обновлялась в последнее время, она будет установлена ​​ежемесячно.

Наконец, вы можете определить, хотите ли вы включать изображения в карту сайта. Если выбран параметр «Включить изображения», все изображения на вашем сайте будут включены по умолчанию.

Вы можете исключить изображения, такие как ваш логотип и значки социальных сетей, но включить фотографии продуктов и другую важную графику.

По завершении настройки нажмите «Далее», чтобы сгенерировать карту сайта. Сохраните его на свой компьютер и дважды проверьте размер.

Карта сайта не может содержать более 50 000 URL-адресов или иметь размер более 50 МБ, поэтому, если ваш файл нарушает любое из этих правил, он может быть разделен на два отдельных файла.

Но если вы получите файл подходящего размера, загрузите его в корневую папку вашего сайта через FTP-клиент.

Тогда переходите к следующему шагу!

Google XML Sitemaps

Google XML Sitemaps — еще один бесплатный плагин для сайтов WordPress.Если вы не используете Yoast, это простой способ создать карту сайта с настраиваемыми параметрами, похожими на те, которые вы можете установить с помощью Screaming Frog.

После того, как вы установили свои предпочтения, вы можете найти свою карту сайта по URL-адресу, указанному в верхней части страницы. В большинстве случаев это будет просто http://yourdomain.com/sitemap.xml.

2. Отправьте карту сайта в Google Search Console

Теперь, когда вы создали карту сайта, вам нужно отправить ее в Search Console.

Это позволяет Google узнать обо всех страницах, которые вы хотите проиндексировать, и может помочь их поисковым роботам найти самые важные из них.

На главной странице Search Console выберите предпочитаемую версию своего домена. Затем на левой боковой панели нажмите «Конфигурация сайта», затем «Карты сайта».

Нажмите кнопку «Добавить / протестировать карту сайта» в правом верхнем углу и введите URL-адрес своей карты сайта.

В большинстве случаев URL вашей карты сайта будет просто http://yoururl.com/sitemap.xml.

Если вы используете плагин WordPress, URL-адрес будет в настройках плагина. В Yoast файл обычно называется sitemap_index.xml.

Вы можете проверить местоположение своей карты сайта, введя ее в свой браузер. Если у вас правильный URL-адрес, он должен выглядеть примерно так:

После того, как вы нажмете «Отправить», вы увидите, что ваш файл Sitemap находится в состоянии ожидания.

После утверждения вы сможете увидеть количество отправленных вами страниц и количество проиндексированных.

Это может дать вам хорошее представление о , какой объем информации о вашем сайте хранит Google.

Однако важно понимать, что создание и отправка карты сайта — это не разовый процесс.

По мере того, как вы продолжаете добавлять страницы и обновлять свой сайт, ваш сайт будет развиваться — и ваша карта сайта должна развиваться вместе с ней.

Это поможет вам быть уверенным, что у Google всегда будет обновленная версия того, как должен выглядеть ваш сайт, и он сможет сканировать и индексировать ваш сайт с максимальной эффективностью.

3. Создайте robots.txt

Хотя название «robots.txt» может показаться немного техническим и пугающим, сам файл на самом деле довольно прост.

Роботы.txt — это текстовый файл на вашем веб-сайте, который указывает поисковым системам, что индексировать, а что не индексировать.

По сути, это список команд для поискового робота, который сообщает ему, где он может и что не может перейти на ваш сайт.

Это самая первая остановка, которую делает паук в своем путешествии, чтобы проиндексировать ваш сайт. Если ваш robots.txt говорит: «Не индексируйте меня», то паук будет двигаться дальше.

Как вы уже догадались, очень важно, чтобы ваш robots.txt давал Google разрешение на сканирование сайта.Это значение по умолчанию.

Тем не менее, если на вашем веб-сайте есть разделы, которые вы не хотите отображать в результатах поиска, вы можете настроить это в файле robots.txt.

Как Google объясняет :

Мы предлагаем инструменты для веб-мастеров, которые позволяют владельцам сайтов детально выбирать, как Google сканирует их сайт: они могут предоставить подробные инструкции о том, как обрабатывать страницы на своих сайтах, могут запросить повторное сканирование или могут полностью отказаться от сканирования с помощью файла под названием «роботы». .текст».

Чем больше у вас страниц на вашем веб-сайте и чем больше вы открываете их до индекса, тем лучше будет ваша индексация.

Тем не менее, контроль над вашей индексацией важен — и именно здесь ваш файл robots.txt становится важным.

Как создать файл robots.txt

Файлы Robots.txt — это простые текстовые файлы. Это упрощает создание их в стандартном текстовом редакторе вашего компьютера, таком как Блокнот (для пользователей Windows) и TextEdit (для пользователей Mac).

Это , а не , включая такие программы, как Microsoft Word, которые могут добавлять дополнительное форматирование, искажающее ваш файл.

Прежде чем начать, проверьте свой FTP, чтобы увидеть, есть ли у вас уже файл robots.txt. Если вы это сделаете, он должен храниться в вашей корневой папке как что-то вроде http://yourdomain.com/robots.txt.

Если да, загрузите его и используйте в качестве отправной точки.

Если нет, ничего страшного! Создать файл robots.txt , даже с нуля, довольно просто.

Во-первых, вам необходимо ознакомиться с несколькими основными элементами синтаксиса robots.txt.

У Google есть полезный ресурс robots.txt для этого:

Чтобы создать файл, вам нужно знать несколько элементов:

• User-agent : бот, к
применяется следующее правило
• Disallow : URL-адрес, который вы хотите заблокировать
• Разрешить : URL-путь в заблокированном родительском каталоге, который нужно разблокировать

Также важно отметить, что благодаря звездочке команда User-agent применяется ко всем поисковым роботам.Поэтому, если вы создаете правила с помощью «User agent: *», они будут применяться к сканерам из Google, Bing и всем остальным ботам, которые сканируют ваш сайт.

Если вы хотите, чтобы весь ваш сайт был открыт для сканирования, ваш файл robots.txt будет выглядеть так:

Правило применяется ко всем сканерам, и ничего не блокируется.

Если вы хотите создать более сложный файл robots.txt, вы можете использовать генератор, например SEObook .

Просто выберите ботов, к которым будет применяться каждое правило, затем введите файлы или каталоги, которые вы хотите запретить или разрешить.

Затем вы можете скопировать и вставить созданный контент внизу страницы в свой файл robots.txt.

SEObook также дает вам возможность добавить карту сайта. Раньше это считалось оптимальной практикой, но в нем нет необходимости, если вы отправили карту сайта в Google Search Console.

Тем не менее, это не повредит — так что не стесняйтесь включать его, если хотите.

Зачем блокировать определенные страницы?

Блокирование индексирования определенных разделов вашего сайта — одна из важнейших задач файла robots.txt файл.

Но зачем кому-то это нужно?

Короткий ответ заключается в том, что не каждая страница вашего сайта представляет ценность для читателей. Таким образом, даже если эти страницы были проиндексированы , они, скорее всего, никогда не ранжируются в результатах поиска.

Например, если ваш сайт работает на WordPress, он имеет множество подпапок, содержащих плагины и другую информацию.

Эти файлы важны для работы вашего сайта, но не помогают посетителям. Поэтому, если вы хотите предотвратить их сканирование и индексирование, ваш файл robots.txt может выглядеть примерно , как это :

Вы также можете запретить свои страницы с благодарностью или подтверждением, страницы оформления заказа и любые другие страницы, на которые пользователю не имеет смысла переходить непосредственно из поисковой системы.

Это предохраняет поисковые системы от индексации информации, которая вряд ли когда-либо будет обработана в результате.

Robots.txt и ограничения сканирования

Запрет доступа к определенным страницам и подпапкам также может помочь ботам более эффективно сканировать ваш сайт.

Google ограничивает частоту сканирования сайтов, чтобы избежать перегрузки серверов. Вы также можете установить собственную частоту сканирования в Search Console.

Это означает, что он ограничен в том, сколько времени он может проводить на вашем сайте и сколько страниц он может сканировать за это время.

Запрет определенных страниц помогает сканерам сосредоточиться на содержании, которое вы действительно хотите проиндексировать, — и может улучшить частоту сканирования ваших ценных страниц в поисках новой информации.

4. Создайте внутренние ссылки

Один из наиболее эффективных способов поощрения сканирования и повышения индексации вашего веб-сайта — использование внутренних ссылок.

Пути, по которым пауки проходят через Интернет, образуются ссылками. Когда одна страница ссылается на другую страницу, паук следует по этому пути.

Убедитесь, что на вашем собственном веб-сайте есть ссылки на все ваши самые важные страницы.

Обычно это происходит естественным образом, если у вас есть хорошо организованный веб-сайт.Например, эта стандартная архитектура веб-сайта ресторана ссылается на внутренние страницы с основной навигацией.

Структура сайта часто упускается из виду, но может иметь большое влияние на множество различных частей вашей стратегии SEO.

Пользовательский опыт

С точки зрения пользователя, логическая архитектура сайта и навигация значительно упрощают просмотр вашего сайта.

Заранее спланируйте иерархию, а затем логически организуйте навигацию.Пользователю не нужно гадать, где находится информация, которую он ищет — она ​​должна быть интуитивно понятной на основе ваших категорий и ссылок.

Также рекомендуется сделать структуру сайта максимально простой. Сложные мегаменю могут выглядеть необычно и иногда необходимы для очень больших сайтов, но если они вам не нужны, не используйте их.

Вместо этого придерживайтесь простой и понятной настройки, которая сразу делает очевидным, где пользователю нужно щелкнуть, чтобы найти нужную информацию.

Гусеничные

Помимо пользователей-людей, логическая структура сайта облегчает поисковым роботам доступ к вашему контенту и его индексацию.

Хорошо спланированная архитектура сайта устанавливает иерархию между вашими страницами. Это помогает сканерам понять, какие страницы являются наиболее важными и как разные страницы связаны друг с другом.

Внутренние ссылки отправляют сканеров на другие страницы вашего сайта и помогают им находить новый контент

На каждой странице вашего сайта должны быть ссылки, указывающие на нее

Страницы концентратора контента

Если у вас много контента, вы можете создать «центральные страницы», чтобы помочь пользователям и поисковым системам более эффективно просматривать ваш сайт.

Эти страницы могут быть организованы по-разному, но по сути служат указателями вашей информации по определенным темам.

Вы можете создавать группы узловых страниц:

• Сообщения в блоге на похожие темы
• Похожие товары (если у вас есть сайт электронной торговли)
• Новости по теме (если вы управляете редакционным сайтом)

Эти страницы помогают Google определять релевантность отдельных страниц и их связь с другими страницами вашего сайта.

Кроме того, с точки зрения пользователя, он позволяет легко находить дополнительный контент, связанный с интересующими нас страницами.

Например,

TechCrunch имеет страницы категорий для определенных тем, о которых он часто пишет, например Internet of Things .

Если пользователь читает историю об Интернете вещей и хочет узнать больше, эта страница позволяет ему легко найти дополнительные статьи по этой теме.

И когда сканер увидит все эти страницы, сгруппированные вместе, он сможет определить, что у них похожий контент.

Эти типы узловых страниц могут быть чрезвычайно полезны. А если вы хотите добавить его на свой сайт, он может быть настолько простым или сложным, насколько вам нравится.

Если у вас есть опыт работы с HTML, вы можете жестко закодировать страницу (или страницы) с группами связанных ссылок. Делайте все возможное с форматированием или нет — решать вам.

Настоящая ценность заключается в создаваемых вами группировках и в той ценности, которую они предоставляют пользователям и поисковым роботам.

Независимо от того, какой формат вы выберете, обязательно продолжайте добавлять на свои центральные страницы с течением времени по мере добавления дополнительного контента.

Ссылки на новые страницы по мере их добавления помогут этим страницам быстрее индексироваться (и ранжироваться).

Ссылка на соответствующий контент на каждой странице

По мере того, как вы добавляете контент на свой сайт, темы, которые вы освещаете, обязательно должны совпадать.

Эти области пересечения предоставляют прекрасные возможности для добавления внутренних ссылок.

Например, если у вас есть сайт по личным финансам, вы можете написать сообщение с советами по улучшению кредитного рейтинга.

Если вы уже писали более общий пост о кредитном рейтинге, вы можете указать ссылку на него в качестве ресурса для читателей.

Хотя некоторые из ваших посетителей могут быть лояльными читателями, многие из них не прочитали все содержимое вашего сайта.

Направление к релевантной информации может помочь им узнать больше о теме и побудить их проводить больше времени на вашем сайте.

Если ваш сайт относительно невелик, определение релевантных страниц для ссылки — несложный процесс.

И если вы напишете весь контент самостоятельно, ваш мозг может даже служить в качестве живого индекса каждой страницы на сайте.

Но если у вас большой сайт с сотнями (или тысячами!) Статей и сообщений, может быть почти невозможно определить наиболее релевантные из них, на которые можно ссылаться в каждом новом создаваемом вами фрагменте контента.

Именно здесь становятся чрезвычайно полезными такие инструменты, как подключаемый модуль еще одного связанного сообщения или YARPP . После установки плагина вы можете использовать его для автоматического добавления ссылок на релевантный контент в свои сообщения и страницы.

Вы можете установить предпочтения для ссылок, включенных в зависимости от категорий и временного диапазона.

Так, например, если вы настраиваете это для своего блога о личных финансах, вы можете выбрать размещение сообщений, которые вы написали о кредите за последний год, в нижней части ваших новых сообщений о кредите .

Вы также можете определить, хотите ли вы включать простые, только текстовые ссылки или ссылки с изображениями-эскизами.

Оглавление

Многие пользователи не читают все содержимое страницы. Они попадают на страницу в поисках определенной информации, затем прокручивают и просматривают ее, пока не найдут ее.

Если они не могут найти на вашей странице то, что им нужно, они, скорее всего, вернутся к результатам поиска и выберут другой результат.

Чем проще вы сделаете им навигацию по вашему контенту, тем больше вероятность, что они останутся. Один из способов сделать это — создать оглавление.

Если у вас есть сайт WordPress, вы можете использовать плагин, например Easy Table of Contents , чтобы создать, как следует из названия, оглавление. (Без труда).

Просто установите плагин, определите типы страниц, на которых вы хотите, чтобы ваше оглавление отображалось, и настройте, где вы хотите, чтобы оно отображалось на странице.

Вы также можете настроить плагин на автоматическое создание оглавления, когда вы используете определенное количество заголовков, и разрешить пользователям переключать его видимость.

Добавление их на ваши страницы позволяет пользователям легко переходить к ключевым разделам или информации, а также дает вам возможность ссылаться на дополнительные ресурсы.

Ваши сообщения не могут служить исчерпывающим ресурсом для ваших читателей. Но есть большая вероятность, что контент, который вы написали в прошлом, имеет отношение к вашему новому контенту.

Включите ссылки на эти сообщения под оглавлением, чтобы показать вашим читателям, где можно найти дополнительную информацию, и улучшите вашу внутреннюю структуру ссылок в процессе.

Внутренняя ссылка Yoast

Если у вас Yoast Premium, вы можете использовать функции внутренних ссылок Yoast, чтобы упростить процесс добавления соответствующих ссылок к каждому из ваших сообщений.

Эта функция работает, анализируя известные слова в каждом сообщении, а затем предоставляет предложения по ссылкам на основе статей с похожими известными словами и содержанием.

В отличие от YARPP, эта функция не полностью автоматизирована. Вместо того, чтобы автоматически добавлять ссылки в конец ваших сообщений, он дает вам сокращенный список возможных вариантов.

Таким образом, вы можете выбрать те варианты, которые вам больше всего нравятся, а затем включить их в свой пост, как вы сочтете нужным.

Это экономит время, избавляя от необходимости возвращаться ко всем вашим старым сообщениям каждый раз, когда вы публикуете что-то новое и хотите включить соответствующие внутренние ссылки.

Это требует немного больше усилий, чем автоматический плагин, но в результате вы можете сделать ваши ссылки более естественными для вашего контента.

5. Зарабатывайте входящие ссылки

Хотя внутренние ссылки помогают поисковым роботам понять структуру вашего сайта и найти новые страницы, наиболее важными являются входящие ссылки или ссылки с других сайтов.

Когда другие веб-сайты ссылаются на ваш, это дает вашему сайту поддержку во многих отношениях.

Если у вас есть опыт работы с SEO, вы уже знаете, насколько важны ссылки для установления доверия и авторитета.

Чем больше у вас ссылок с надежных сайтов, тем более авторитетным вы будете выглядеть в глазах Google и тем выше вероятность того, что они высоко оценят ваш сайт.

И хотя это само по себе является причиной сосредоточиться на получении входящих ссылок, они также могут помочь вам быстрее проиндексировать ваш сайт.

Ссылки с других сайтов отправляют сканеры на ваши страницы. Поэтому, если другой сайт ссылается на одну из ваших новых страниц, эта страница, скорее всего, будет просканирована и проиндексирована гораздо раньше.

И хотя некоторые из этих ссылок могут возникать естественным образом, лучше использовать более активный подход.

Если вы можете минимизировать время между появлением нового контента на сайте и возвращением ссылок, вы улучшите скорость индексации этого нового контента.

Конечно, если у вас есть опыт построения ссылок, вы знаете, что получить ссылки часто легче сказать, чем сделать.

Но если вы заранее создадите стратегию продвижения, вы будете точно знать, что делать, когда появится новая публикация, и у вас будет гораздо больше шансов быстро проиндексировать эту страницу.

Синдикация контента

Если вы можете найти места для синдицирования вашего контента, это один из самых простых способов обеспечить аудиторию для каждой новой части контента, которую вы публикуете.

Syndication — это процесс повторной публикации вашего контента на других веб-сайтах с указанием вашего сайта.

В отличие от гостевой публикации, которая требует от вас создания оригинального содержания для чужого сайта, вы получаете вознаграждение в виде ссылки с гораздо меньшими усилиями.

Например, Personal Branding Blog объединяет все свои новые сообщения на специальную страницу на сайте Business2Community.

Это означает, что весь их контент сразу публикуется в двух местах.

Кроме того, внизу каждого сообщения есть ссылка на личный блог брендинга.

Конечно, синдикация может быть сложной. Если все сделано неправильно, это может вызвать проблемы с дублированием контента.

В некоторых случаях владельцы сайтов даже находят синдицированные версии своего контента выше их собственного сайта.

Но когда все сделано хорошо, может помочь вам расширить охват и заработать больше ссылок из более крупных публикаций.

Повторная публикация на носителе

Medium — чрезвычайно популярный сайт для публикации и чтения контента.

Это также отличное место для синдикации.

Хотя многие пользователи публикуют исключительно на платформе, вы также можете использовать ее для повторной публикации сообщений и статей на своем сайте. Medium также автоматически использует тег rel = canonical, поэтому вам не придется беспокоиться о дублировании контента

Это тоже просто: просто введите URL-адрес, по которому ваша статья была ранее опубликована, в Medium’s Import Tool , затем нажмите «Импорт».

При этом будет извлечена вся копия исходного сообщения, а также форматирование текста, заголовки, списки и ссылки.Это позволяет очень легко импортировать и публиковать сообщения.

Изображения не импортируются автоматически , поэтому вам придется добавлять их вручную. Если в исходном посте не было изображений, подумайте о добавлении некоторых перед публикацией!

На главной странице и страницах категорий

Medium отображаются популярные сообщения с изображением перед заголовком. Нельзя сказать, что не может получить результаты без изображения — но это, вероятно, будет намного сложнее.

Кроме того, если вы попадете на страницу категории, вы не хотите, чтобы ваш текстовый заголовок конкурировал за внимание со всеми этими изображениями.

Потратьте лишние десять минут, чтобы добавить несколько изображений в свой пост.

В конце концов, контент уже написан и импортирован, поэтому ваше время, потраченное на публикацию, скорее всего, в конечном итоге составит менее 15 минут

После импорта сообщения и добавления изображений у вас также есть возможность создать собственную постоянную ссылку.

Щелкните три точки справа от кнопки «Опубликовать», затем выберите «Пользовательский».

Затем вы можете добавить к своему сообщению до пяти соответствующих тегов.

Число рядом с каждым тегом показывает, сколько пользователей подписано на него. Таким образом, если вы выберете теги с большим количеством подписчиков, вы сможете значительно расширить охват и получить больше пользы от каждого публикуемого вами контента.

Добавить в справочники инфографики

Справочники раньше были огромной частью SEO. Размещение вашего сайта в как можно большем количестве случайных каталогов было эффективным способом повысить рейтинг и привлечь трафик.

К счастью, это уже не так.Термин «каталог» часто ассоциируется со спамом, неэффективной практикой — и это правильно.

Справочники инфографики являются исключением.

Visual.ly, например, позволяет пользователям отправлять графику в свою галерею визуального вдохновения

Если вы создаете инфографику для своего сайта, вы можете отправить ее на сайт и использовать исходную ссылку в качестве источника. Это требует очень небольшой работы для потенциального воздействия, которое вы можете получить.

Кроме того, учитывая, насколько трудоемким может быть создание инфографики, этот дополнительный шаг — отличный способ максимизировать отдачу от каждого из них.

Опубликовать в LinkedIn Pulse

Как и Medium, LinkedIn Pulse — это платформа, которая поощряет оригинальный контент, но также может использоваться для привлечения трафика на ваш сайт.

Если вы еще не публиковали на платформе, важно отметить, что статьи Pulse отделены от регулярных обновлений статуса.

Чуть ниже того места, где вы обычно вводите короткое обновление, нажмите «Написать статью».

Затем вы увидите полнотекстовый редактор с параметрами форматирования, мультимедийными возможностями и всем остальным, что вы ожидаете от платформы публикации.

Многие пользователи относятся к этой функции как к блогу и используют ее для публикации полностью оригинального контента.

Это, безусловно, неплохое использование платформы, особенно если учесть, что они получают письма непосредственно перед профессиональными контактами.

Но если вы хотите привлечь трафик к содержанию, которое вы уже опубликовали на своем сайте, вы можете использовать Pulse, чтобы поделиться отрывком, а затем добавить ссылку на полную версию.

Скопируйте и вставьте несколько первых разделов (или больше, в зависимости от длины сообщения).Обязательно включите информацию, которая достаточно интересна, чтобы читатели захотели дочитать статью до конца.

Затем включите ссылку на полную версию с призывом к действию, например «Нажмите, чтобы продолжить чтение» или «Подробнее!»

Эта стратегия позволяет вам воспользоваться преимуществами встроенной аудитории и охвата LinkedIn, в конечном итоге направляя трафик на ваш собственный сайт.

Пока ваши первые несколько абзацев четкие, это отличный способ быстро заработать читателей после публикации нового контента.

6. Поощряйте обмен в социальных сетях

Степень роли социальных сетей в SEO неясна.

Но что ясно и , так это то, что социальные платформы — это простой способ немедленно сообщить людям, что ваш новый контент существует.

Скопируйте и вставьте ссылку, добавьте несколько слов текста и вуаля — ваш контент будет доступен всему миру (или, по крайней мере, вашим подписчикам).

При совместном использовании ваших страниц в социальных сетях на них также отправляются поисковые роботы, которые могут помочь ускорить процесс индексации.

Платформы социальных сетей должны обязательно иметь место в вашей издательской стратегии. А если еще не сделали, начать легко.

Создание учетных записей на основных платформах

Если вы только начинаете работать с социальными сетями, варианты могут показаться немного подавляющими. Но, по крайней мере, вы должны быть представлены в Facebook и Twitter.

Другие платформы, которые вы используете, зависят от вашей отрасли и целевой аудитории.

Если вы, например, представляете компанию B2B, вам определенно захочется быть в LinkedIn.С другой стороны, если вы розничный торговец одеждой, ориентированный на людей 18–24 лет, вы, вероятно, добьетесь лучших результатов с помощью Instagram.

После того, как вы определились, на чем вы хотите сосредоточить свои усилия в социальных сетях, найдите время и создайте свой аккаунт или бизнес-страницу.

Например, на Facebook вы захотите включить всю свою контактную информацию, а также сведения о ваших услугах, миссии и истории.

У вас также должны быть фотография профиля и фотография на обложке, которые точно отражают ваш бренд.

Создание стратегии продвижения

После того, как ваши учетные записи будут запущены, вы должны создать подпрограмму социального обмена , чтобы обеспечить регулярную публикацию нового контента в своих учетных записях.

Один из лучших способов сделать это — использовать такой инструмент, как Buffer.

Вы можете создать расписание для всех случаев, когда вы хотите публиковать новый контент для каждой из ваших учетных записей в социальных сетях.

Затем вы можете добавить контент в свою очередь и автоматически поделиться им в заранее определенное время публикации.

Таким образом, вам никогда не придется беспокоиться о том, чтобы не забыть публиковать определенные обновления или делиться определенными ссылками в разное время дня или недели.

Кроме того, каждый раз, когда вы публикуете новую страницу, вы можете сразу же добавить ее в свою очередь.

Таким образом, независимо от того, в какое время он выйдет в эфир, он будет добавлен к вашему ранее существовавшему расписанию и предоставлен вашим подписчикам в ожидаемое время.

Когда вы установите такой уровень согласованности, ваши подписчики будут знать, чего ожидать, и начнут с нетерпением ждать возможности регулярно читать ваши новые статьи и сообщения в блогах.

С точки зрения индексации это также означает, что каждая новая страница, которую вы добавляете, будет доступна в течение нескольких дней после публикации.

Это отличный способ привлечь роботов на ваш сайт и повысить шансы на быструю индексацию.

Связь с влиятельными лицами

Всем нравится чувствовать себя важными.

И хотя ваша главная цель с контентом должна состоять в том, чтобы приносить пользу вашим читателям, вы можете делать это таким образом, чтобы подчеркивать других людей и их мнения.

Один из лучших способов сделать это — использовать сводные сообщения или сообщения, в которых сочетаются цитаты, советы, прогнозы и другая информация от множества соответствующих людей.

Например, этот огромный список маркетинговых прогнозов видеоконтента включает в себя информацию от 87 опытных маркетологов.

Это дает тонны ценности для читателей, которые хотят учиться у лучших, поскольку все это исходит от уважаемых маркетологов, многие из которых хорошо известны в отрасли.

Кроме того, он дает этим маркетологам возможность продемонстрировать свой опыт — так что вы можете быть уверены, что почти все они поделились им в своих социальных сетях, как только он будет запущен.

Это, вероятно, привело к тонн дополнительного трафика для сайта. Такой трафик может оказаться огромным для индексации.

[tweet_box design = ”default”] Итак, если вы ищете идею для публикации в блоге, которая почти гарантированно привлечет у вас новых подписчиков в социальных сетях и отправит поисковые роботы на ваш сайт, обзорный пост — отличный вариант.[/ tweet_box]

Общайтесь с влиятельными лицами, спрашивайте их совета или идеи по определенной теме, а затем скомпилируйте их в ресурс от ваших читателей.

После публикации обязательно обратитесь к этим влиятельным лицам, чтобы сообщить им об этом. Во многих случаях они будут гордиться тем, что продемонстрируют свой опыт и поделятся публикацией со всеми своими подписчиками.

Рассмотрите возможность использования платных опций

Ссылки для обмена — это эффективный способ сообщить вашим подписчикам, что вы опубликовали новый контент.

Кроме того, вы также можете использовать свои учетные записи в социальных сетях для расширения аудитории с помощью платного продвижения постов.

На всех основных социальных платформах есть опции для «увеличения» контента, чтобы расширить охват.

Таким образом, вместо того, чтобы создавать традиционную рекламу, вы платите за то, чтобы контент, которым вы делитесь со своими подписчиками, был доступен большему количеству людей.

Большинство платформ также делают этот процесс довольно простым.

Например, на Facebook вы можете заранее определить, сколько вы готовы потратить на продвижение своего поста и как долго вы хотите, чтобы продвижение продолжалось.

Затем вы определяете свою аудиторию на основе множества вариантов таргетинга. Если вы хотите, чтобы все было просто, вы можете придерживаться стандартного таргетинга по возрасту, полу и местоположению.

Но если у вас есть более четкое представление о том, кого вы хотите охватить, вы также можете выбрать свою аудиторию на основе таких факторов, как интересы, должности и поведение в Интернете.

По сути, цель здесь — выбрать аудиторию, которая, вероятно, будет заинтересована в чтении статьи, сообщения в блоге или другого контента, которым вы делитесь.

Вы не обязательно пытаетесь продавать этим людям, но они должны быть частью вашей целевой аудитории.

(И если люди, которые, вероятно, будут заинтересованы в вашем контенте , не ваша целевая аудитория … возможно, пришло время скорректировать вашу стратегию.)

После того, как вы выбрали аудиторию, вы можете начинать продвигать свой пост. Если вы никогда раньше не продвигали публикацию, вы можете быть удивлены тем влиянием, которое она может оказать при относительно низкой цене.

Если вы решите сделать это регулярной частью своей стратегии, вы также можете использовать такие инструменты, как AdEspresso , чтобы автоматизировать процесс и сделать его еще проще.

Вы можете настроить свою учетную запись Facebook на автоматический запуск рекламных акций для сообщений, соответствующих определенным критериям.

Так, например, если вы делитесь статьей и она получает 50 лайков органически, вы можете с уверенностью считать, что это эффективный контент для вашего бизнеса.

Это тот контент, в который стоит инвестировать часть своего рекламного бюджета.

В AdEspresso вы можете установить эти параметры заранее — так что каждый раз, когда ссылка органически получает определенное количество лайков, вы автоматически тратите определенную сумму денег, продвигая ее еще большему количеству пользователей.

Это поможет вам получить максимальную отдачу от каждой части контента и направить свой рекламный бюджет на те части, которые принесут вам наибольшую отдачу от вложенных средств.

7. Создайте блог

Алгоритм Google отдает приоритет пользователям « свежих, недавних результатов поиска ».

Владельцы сайтов постоянно публикуют новые страницы и обмениваются новой информацией, а поисковая система фокусируется на том, чтобы пользователи получали самую последнюю версию нужной информации.

Регулярное добавление нового содержания на ваш сайт показывает Google, что ваш сайт предоставляет свежую информацию. Лучший способ сделать это — вести блог.

Блог создает массу контента, которую пауки могут сканировать, а Google — индексировать. Чем больше высококачественного контента вы размещаете в Интернете, тем больше у вас индексации и тем больше возможностей для SEO вы зарабатываете.

У веб-сайтов с блогом в среднем на 434% больше проиндексированных страниц .

У этих компаний также на 97% больше входящих ссылок и на 67% больше потенциальных клиентов.

Итак, если вы еще не ведете блог, его создание может помочь вашей маркетинговой стратегии несколькими способами.

А если вы не знаете, с чего начать, вы можете использовать уже имеющееся содержание блога, чтобы проанализировать, что работает.

Таким образом, вы не просто выбираете темы, которые, по вашему мнению, ваша аудитория может быть интересна , — вы применяете метод сбора данных для создания интересных и эффективных сообщений в блогах.

Исследование конкурентов

Независимо от вашей отрасли или ниши, вероятно, уже сотни (если не тысячи) людей пишут об этом в блоги.

Вы можете использовать эти блоги для исследования конкурентов.

Существует множество инструментов, которые помогут вам определить , какой контент наиболее эффективен для других сайтов.

Один из лучших — Buzzsumo , показывает наиболее эффективный контент для любого домена или темы на основе репостов в социальных сетях.

Если вы знаете, какого конкурента вы хотите исследовать, введите его доменное имя в строку поиска. Затем вы увидите список их страниц, которыми чаще всего пользуются, с подсчетом количества публикаций для Facebook, LinkedIn, Twitter и Pinterest.

Вы также можете выполнить поиск по определенной теме, и вы увидите наиболее распространенный контент по этой теме с различных сайтов.

Если вы еще не знаете, кто ваши конкуренты в блоге, это отличный способ узнать, кто публикует контент в вашей отрасли.

Затем вы можете более подробно изучить каждый из блогов, которые получают много просмотров и репостов.

Если вы уже знаете, кто ваши конкуренты (или если вы просто хотите следить за тем, когда ваша компания упоминается в Интернете), вы можете настроить Google Alerts для отслеживания определенных слов и фраз.

Введите фразу, которую вы хотите отслеживать, а затем установите настройки предупреждений для времени, источников, языка и частоты.

Эти оповещения будут отправляться прямо на вашу электронную почту, чтобы вы могли легко быть в курсе, когда публикуется новый контент по теме, которую вы отслеживаете.

Если вы хотите глубже изучить конкурентные исследования, вы можете использовать тонны из других полезных инструментов .

Для многих из них требуется подписка, но если вы серьезно настроены превзойти своих конкурентов и добиться лучших результатов с содержанием своего сайта, они того стоят.

8. Создайте RSS-канал

Создание RSS-канала не является абсолютно необходимым, но это не повредит.

RSS означает «действительно простое распространение», и это простой способ поделиться публикацией нового контента. По сути, это автоматизированный канал вашего веб-сайта, который обновляется каждый раз, когда вы публикуете новое сообщение.

Это также популярный способ подписки на блоги.

Каждое сообщение будет добавлено в RSS-канал сайта, и пользователи могут подписаться на этот канал и получать электронное письмо каждый раз, когда публикуется новое сообщение.

Сегодня большинство владельцев сайтов предпочитают иметь свои собственные списки адресов электронной почты, поэтому подписка на RSS больше не является популярным вариантом для этой цели.

Тем не менее, RSS-канал может быть эффективным способом сообщить Google о вашем новом содержании, как только оно будет опубликовано, и есть несколько других основных задач, которые вы можете использовать для автоматизации.

Считыватели RSS

Программа чтения RSS позволяет пользователям получать доступ ко всем RSS-каналам, на которые они подписаны, в одном месте. По сути, это настраиваемая новостная лента, где пользователи видят только истории и сообщения из таких публикаций, как.

Когда Google прекратил выпуск своего RSS-ридера Google Reader , многие подумали, что это означает конец работы RSS-ридеров в целом.

Тем не менее, многие люди все еще используют RSS-ридеры, такие как Feedly , в качестве инструмента для курирования контента.

Это идеально подходит для пользователей, которые хотят регулярно делиться полезным контентом в своих учетных записях в социальных сетях со своими подписчиками. Вместо того, чтобы разбираться в шуме на платформах социальных сетей, они могут использовать свои учетные записи Feedly для поиска высококачественных статей и сообщений из публикаций, которым они доверяют.

Итак, если читателям нравится ваш блог и они хотят знать о ваших новых сообщениях, но не обязательно хотят подписываться на рассылку новостей по электронной почте, полезно иметь RSS-канал.

Создать RSS-канал

Самый простой способ создать RSS-канал — использовать Feedburner.

Сначала введите URL-адрес своего блога в поле поиска. Имейте в виду, что в большинстве случаев ваш блог будет находиться в подпапке, например / blog.

Ввод этого URL-адреса (а не только вашего домена) гарантирует, что в ваш канал будут включены только сообщения вашего блога, а не другой контент, например служебные страницы или информация о ценах.

Затем дайте своей ленте заголовок и URL-адрес.

Затем нажмите «Далее» — и готово!

Теперь у вас есть адрес канала, на который пользователи могут подписаться в своих RSS-ридерах. Вы можете сообщить им об этом, добавив на свой сайт ссылку со стандартным значком RSS.

Если на вашем сайте уже есть значки социальных сетей, это логичное место для добавления RSS-канала.

Например, в заголовке журнала Search Engine Journal они ссылаются на свой RSS-канал прямо между кнопкой подписки по электронной почте и ссылками на свои учетные записи Twitter и Facebook.

Это позволяет посетителям, использующим RSS-ридеры, легко подписаться на их ленту.

RSS для автоматизации

После настройки RSS-канала вы также можете использовать его в сочетании с такими инструментами, как Zapier , для автоматизации публикации в социальных сетях.

Этот инструмент позволяет вам создавать «Zap-файлы» или ленты в вашем фиде, а затем автоматически публиковать их на различных платформах.

Сначала создайте учетную запись и введите URL-адрес канала.

Затем у вас есть возможность отфильтровать ленту по определенному контенту или темам.

В большинстве случаев вам нужно включать все свои сообщения.

Но если, например, вы хотите создать Zap, который включает только сообщения по определенной теме, используйте фильтр заголовка, чтобы включать в заголовок только сообщения с этим словом или фразой.

После настройки фильтров нажмите «Продолжить», чтобы завершить создание Zap.

Когда ваш Zap заработает, вы можете использовать Zapier для автоматизации множества задач. Наиболее распространенным является публикация новых RSS-элементов в ваших учетных записях в социальных сетях.

Вы можете настроить свою учетную запись таким образом, чтобы каждый раз, когда вы публикуете новую запись, она автоматически передавалась в выбранные вами социальные сети. Это простой способ сэкономить время и ускорить процесс привлечения трафика и поисковых роботов к вашему новому контенту.

9. Проверьте ошибки сканирования

По мере того, как вы работаете над своим сайтом и добавляете на него новое содержание, важно следить за тем, как он сканируется.

То, что ваш сайт сканируется эффективно сейчас , не означает, что вы никогда не столкнетесь с проблемами.

Могут возникать ошибки сканирования, особенно при внесении значительных изменений в свой веб-сайт, таких как добавление, удаление или перемещение страниц.

К счастью, с Search Console легко отслеживать ошибки сканирования.

Доступ к отчету об ошибках сканирования

Вы можете выявить проблемы, регулярно просматривая свой отчет об ошибках сканирования.

Вот как:

• Откройте Google Search Console и выберите свой веб-сайт
• Нажмите на сканирование
• Ошибки сканирования кликов

В этом отчете будут показаны все проблемы, которые возникали у Google при сканировании вашего сайта за последние 90 дней.

В разделе «Ошибки сайта» вверху показаны все основные проблемы, влияющие на работу всего сайта.

Если у вас есть какие-либо ошибки, вам нужно немедленно исправить их , поскольку они могут помешать правильной индексации всех ваших страниц.

Однако если у вас есть ошибки URL, они влияют только на определенные страницы вашего сайта. Часто это вызвано неработающими ссылками и ошибками перенаправления.

Если вы прокрутите страницу вниз, Search Console предоставит полный список этих URL-адресов и ошибок, так что вы сможете изучить любые проблемы и исправить их.

Используйте Screaming Frog для обнаружения ошибок

Вы также можете использовать такие инструменты, как Screaming Frog , для сканирования вашего сайта на предмет проблем, которые могут повлиять на его сканирование.

Например, если вы настроили переадресацию на своем сайте, это иногда может вызывать ошибки сканирования. Вы можете использовать Screaming Frog, чтобы убедиться, что все ваши перенаправления работают правильно и не приводят к ошибкам 404.

Перед сканированием вашего сайта перейдите на вкладку «Дополнительно» в настройках конфигурации и убедитесь, что установлен флажок «Всегда следовать перенаправлениям».

Это указывает Screaming Frog следовать всем вашим перенаправлениям и предоставлять полный путь и код состояния. Затем выберите «Отчеты» в главном меню и нажмите «Цепочки перенаправления».

Это покажет вам все переадресации на вашем сайте и то, как они работают.

Можно использовать любые перенаправления со статусом 200 или 301. Но если вы увидите какие-то ошибки 404, вы захотите их исправить. Затем запустите отчет еще раз, чтобы убедиться, что все работает правильно.

Если вы перешли на HTTPS, вы также можете использовать Screaming Frog для обнаружения проблем с «небезопасным контентом» или страниц, которые имеют URL-адреса HTTPS, но элементы HTTP.

Чтобы получить доступ к этой информации, выберите опцию «Небезопасное содержимое» в меню «Отчеты».

Если вы обнаружите какие-либо проблемы, проконсультируйтесь с разработчиком, который перенес ваш сайт, чтобы он мог исправить эти проблемы и убедиться, что ваш сайт в безопасности.

Наконец, вы можете использовать Screaming Frog для обнаружения канонических ошибок на вашем сайте.

Канонический тег сообщает сканерам, какую версию вашего домена вы предпочитаете, будь то WWW или не WWW, HTTP или HTTPS.

Подобно установке предпочтительного домена в Search Console, он помогает устранить проблемы с дублирующимся контентом и гарантирует, что Google индексирует правильную версию.

Однако неправильная реализация может вызвать серьезные ошибки сканирования.

Вы можете убедиться, что канонические теги вашего сайта работают правильно, выбрав «Канонические ошибки» в меню «Отчеты».

Если вы видите сообщение 404, это проблема, которую нужно немедленно исправить. Отправьте отчет своему разработчику, чтобы он определил причину проблемы и вернул статус сканирования без ошибок.

Заключение

Проиндексирование в Google — важный первый шаг к созданию успешного веб-сайта.Без него ваш сайт не может отображаться в результатах поиска — это означает, что, если ваши страницы не проиндексированы, они вряд ли получат какой-либо трафик.

К счастью, вам не нужно оставлять индексацию на волю случая. Такие инструменты, как Search Console и Yoast, позволяют контролировать сканирование и индексирование вашего сайта, а также позволяют легко отслеживать статус сканирования.

При обновлении сайта следите за тем, как он сканируется и индексируется. Регулярная проверка — это простой шаг, который позволяет выявлять проблемы и устранять их до того, как они вызовут проблемы с видимостью вашего поиска.

Plus, следование передовым методам, таким как отправка карты сайта, создание ссылок и публикация нового контента на регулярной основе, может помочь в быстром и эффективном сканировании вашего сайта.

Какие ваши любимые методы вы используете, чтобы убедиться, что ваш сайт правильно индексируется? Вы знаете, как проверить статус своего индекса Google?

Эта статья написана сегодня Daily Eggspert.

Последние сообщения Today’s Eggspert (посмотреть все)

Попросить Google перепроверить веб-сайт

Если вы недавно добавляли или вносили изменения на страницу своего сайта, вы можете запросить, чтобы Google повторно проиндексируйте свою страницу, используя любой из перечисленных здесь методов.Вы не можете запросить индексацию для URL что вам не удается.

Вы используете размещенную платформу управления контентом (например, Blogger или WordPress)? В В большинстве случаев платформа автоматически отправляет ваш новый контент в поисковые системы. Проверьте свои статьи поддержки платформы.

Общие положения

• Сканирование может занять от нескольких дней до нескольких недель. Будьте терпеливы и следите за прогрессом используя индекс Отчет о состоянии или URL Инструмент для осмотра.
• Все описанные здесь методы имеют примерно одинаковое время отклика.
• Существует квота на отправку отдельных URL-адресов.
• Если запросить повторное сканирование для одного и того же URL-адреса или карты сайта несколько раз, он не просканируется Быстрее.

Методы запроса сканирования

Используйте инструмент проверки URL-адресов (всего несколько URL-адресов)

Примечание: Вы должны быть владельцем или полноправный пользователь свойства Search Console, чтобы иметь возможность запросить индексацию в инструменте проверки URL.

Используйте URL Инструмент проверки для запроса сканирования отдельных URL-адресов. Обратите внимание: если у вас большие числа URL-адресов, вам следует вместо этого отправить карту сайта.

Чтобы отправить URL в индекс:

1. Следуйте общим рекомендациям.
2. Проверьте URL-адрес , используя URL-адрес Инструмент для осмотра.
3. Выбрать Запросить индексирование . Инструмент запустит живую проверку URL-адреса, чтобы увидеть есть ли у него какие-либо очевидные проблемы с индексацией, и если нет, страница будет поставлена ​​в очередь для индексации.Если инструмент обнаружит проблемы со страницей, попробуйте их исправить.

Запрос на сканирование не гарантирует, что включение в результаты поиска произойдет мгновенно. или даже вообще. Наши системы отдают предпочтение быстрому размещению качественного и полезного контента.

Отправить карту сайта (сразу несколько URL)

Карта сайта — это важный способ для Google обнаружить URL-адреса на вашем сайте. Карта сайта также может включать дополнительные метаданные о версиях на других языках, видео, изображениях или новостные страницы.Узнайте, как создать и отправить карта сайта.

Отправить отзыв о документации

Как поисковые роботы Google индексируют ваш сайт

Перед тем, как начать поиск, поисковые роботы собирают информацию с сотен миллиардов веб-страниц и систематизируют ее в поисковом индексе.

Процесс сканирования начинается со списка веб-адресов из прошлых сканирований и карт сайта, предоставленных владельцами веб-сайтов.Когда наши сканеры посещают эти веб-сайты, они используют ссылки на этих сайтах для обнаружения других страниц. Программа уделяет особое внимание новым сайтам, изменениям существующих сайтов и мертвым ссылкам. Компьютерные программы определяют, какие сайты сканировать, как часто и сколько страниц загружать с каждого сайта.

Мы предлагаем Search Console, чтобы предоставить владельцам сайтов детальный выбор способа сканирования их сайта Google: они могут предоставить подробные инструкции о том, как обрабатывать страницы на своих сайтах, могут запросить повторное сканирование или могут полностью отказаться от сканирования с помощью файла под названием «robots.текст». Google никогда не принимает платежи за более частое сканирование сайта — мы предоставляем одни и те же инструменты для всех веб-сайтов, чтобы обеспечить наилучшие результаты для наших пользователей.

Поиск информации путем сканирования

Интернет похож на постоянно растущую библиотеку с миллиардами книг и без центральной файловой системы. Мы используем программное обеспечение, известное как веб-сканеры, для обнаружения общедоступных веб-страниц. Сканеры просматривают веб-страницы и переходят по ссылкам на этих страницах так же, как если бы вы просматривали контент в Интернете.Они переходят от ссылки к ссылке и возвращают данные об этих веб-страницах на серверы Google.

Организация информации путем индексации

Когда сканеры находят веб-страницу, наши системы обрабатывают ее содержимое, как это делает браузер. Мы принимаем во внимание ключевые сигналы — от ключевых слов до актуальности веб-сайта — и отслеживаем все это в поисковом индексе.

Индекс поиска Google содержит сотни миллиардов веб-страниц и имеет размер более 100000000 гигабайт.Это похоже на указатель в конце книги — с записью для каждого слова, встречающегося на каждой веб-странице, которую мы индексируем. Когда мы индексируем веб-страницу, мы добавляем ее к записям для всех содержащихся на ней слов.

С помощью Сети знаний мы продолжаем выходить за рамки соответствия ключевых слов, чтобы лучше понимать людей, места и вещи, которые вам небезразличны. Для этого мы организуем не только информацию о веб-страницах, но и другие типы информации.Сегодня Google Search может помочь вам найти текст в миллионах книг из крупных библиотек, узнать время в пути в вашем местном агентстве общественного транспорта или помочь вам ориентироваться в данных из общедоступных источников, таких как Всемирный банк.

Как заставить Google мгновенно проиндексировать ваш новый веб-сайт

Хотите, чтобы на ваш сайт было больше обычного поискового трафика?

Готов поспорить, что да, мы все делаем!

Органический поисковый трафик имеет решающее значение для развития вашего веб-сайта и бизнеса.

Согласно некоторым исследованиям, около 53% трафика вашего сайта можно отнести к обычному поиску.

Но статистика не имеет большого значения, если ваш сайт вообще не отображается в результатах поиска.

Как вы индексируете свой новый сайт или блог в Google, Bing и других поисковых системах?

Что ж, у вас есть два варианта.

Вы можете использовать «черепаховый» подход — просто сядьте и подождите, пока это произойдет естественным образом, но это может занять недели или месяцы.

(Поверьте, я бывал там раньше — не весело.)

Или вы можете сделать это сейчас, давая вам больше времени и энергии для увеличения коэффициента конверсии, улучшения вашего социального присутствия и, конечно же, написания и продвижения отличного и полезного контента.

Не знаю, как вы, но я бы предпочел, чтобы мои сайты были проиндексированы как можно быстрее, потому что это дает мне больше времени для расширения моей аудитории.

Именно с помощью этих стратегий я увеличил количество посетителей этого блога до 600 000 в месяц так же быстро, как и я!

Хотите сделать то же самое?

Не сдавайтесь, потому что в этом пошаговом руководстве я рассказываю обо всем, что узнал о SEO и о том, как быстро проиндексировать ваш сайт!

Я расскажу, как заставить Google быстро проиндексировать наш веб-сайт, что приведет к увеличению органического поискового трафика и повышению рейтинга.

Приступим!

Зачем вам нужен Google для индексации вашего сайта?

Во-первых, очевидный ответ.

Если вы хотите, чтобы ваш сайт вообще отображался в результатах поиска, его необходимо проиндексировать.

Однако вы не хотите, чтобы ваш сайт индексировался только один раз. Вы хотите, чтобы поисковые системы продолжали переиндексировать ваш сайт.

Поисковые системы, такие как Google, не обновляются автоматически.

Они полагаются на пауков — маленькие кусочки компьютерного кода, которые каждая поисковая система отправляет для «сканирования» сети (отсюда и «паук»).

Вам нужна эффективная частая скорость сканирования.

Работа паука — искать новые материалы в сети и обновлять уже проиндексированную версию вашего сайта. Этим «новым материалом» может быть новая страница на существующем сайте, изменение существующей страницы или совершенно новый сайт или блог.

Как только паук находит новый сайт или страницу, ему необходимо выяснить, о чем этот новый сайт или страница.

Еще на Диком Диком Западе ранней сети пауки поисковых машин были далеко не такими умными, как сегодня.Вы можете заставить паука проиндексировать и ранжировать вашу страницу, основываясь только на том, сколько раз конкретная поисковая фраза («ключевое слово») появлялась на странице.

Для сегодняшнего успеха контента нельзя полагаться на эти старые стратегии поисковой оптимизации.

Ключевое слово даже не обязательно должно быть в теле страницы. Многие люди оценивали торговую марку своего крупнейшего конкурента, просто вставляя десятки вариантов этой торговой марки в метатеги страницы!

К счастью для пользователей поиска Google и этичных владельцев веб-сайтов, те времена давно прошли.

Сегодня за наполнение ключевыми словами и метатегами вы будете наказаны, а не вознаграждены. А мета-теги ключевых слов на самом деле вообще не являются частью алгоритма (хотя все же есть веские причины их использовать).

Если вы не будете осторожны, ваш сайт может вообще исключить из индекса — это означает, что ваш сайт вообще не будет ранжироваться ни по одному ключевому слову.

В наши дни Google больше заботится об общем опыте пользователя на вашем сайте и о намерениях пользователя, стоящих за поиском — i.д., хочет ли пользователь что-то купить (коммерческое намерение) или чему-то научиться (информационное намерение)?

Они даже сделали Page Experience фактором ранжирования.

Не поймите меня неправильно — ключевые слова по-прежнему имеют значение. По словам Брайана Дина из Backlinko, важны и другие факторы — всего до 200. К ним относятся такие вещи, как качественные входящие ссылки, социальные сигналы (хотя и не напрямую) и действительный код на всех ваших страницах.

Ничего из этого не будет иметь значения, если пауки не смогут определить поисковые системы, где находятся ваши страницы, то есть они не будут отображаться в результатах поиска.

Вот почему индексирование веб-сайтов так важно.

Проще говоря, индексирование — это способ паука собирать и обрабатывать все данные со страниц и сайтов во время их обхода по сети.

Частое индексирование улучшает результаты поиска.

Паук отмечает новые документы и изменения, которые затем добавляются в поисковый индекс, поддерживаемый Google. Эти страницы добавляются только в том случае, если они содержат качественный контент и не вызывают никаких тревог из-за таких сомнительных действий, как наполнение ключевыми словами или создание кучи ссылок из источников, не заслуживающих доверия.

Когда паук видит изменение на вашем веб-сайте, он обрабатывает как контент (текст) на странице, так и те места на странице, где размещены условия поиска. Он также анализирует теги заголовков, метатеги и атрибуты alt для изображений.

Затем этот паук добавляет или «индексирует» этот контент в Google.

Вкратце об индексировании. Это важный инструмент для веб-мастеров.

Когда поисковый пользователь приходит в поисках информации, вводя ключевые слова для поиска, алгоритм Google начинает работать.Затем алгоритм решает, где оценить страницу по сравнению со всеми другими страницами, связанными с этими ключевыми словами.

Частота индексации вашего сайта может повлиять на вашу эффективность в результатах поиска. Вы хотите, чтобы весь ваш последний контент был всегда доступен для тех, кто ищет, и для пауков Google.

Это краткая и несколько упрощенная версия того, как Google находит, анализирует и индексирует новые сайты, подобные вашему.

Многие другие поисковые системы, такие как Bing или Yahoo, следуют аналогичным процедурам, хотя могут быть различия в специфике, поскольку каждая имеет свой собственный алгоритм.

Какие факторы индексации имеют значение?

Вам нужен эффективный индекс для вашего веб-сайта.

Это означает, что вы хотите, чтобы пауки поисковых систем как можно быстрее находили ваш новый контент после того, как вы нажали кнопку «Опубликовать».

Вы можете проверить, как часто Google сканирует ваши страницы, войдя в Search Console.

Еще не настроили Google Search Console? Перейдите к шагу 2, чтобы узнать, как настроить свой веб-сайт.

В Search Console щелкните свой веб-сайт.Затем нажмите «Настройки»> «Статистика сканирования»> «Открыть отчет». Вы увидите следующие графики:

Первый график показывает, как часто Google сканирует ваш сайт.

График «Запросы сканирования» показывает, как часто Google сканирует мой сайт каждый день.

Как показывает практика, чем больше ползать, тем лучше.

Однако в некоторых случаях чрезмерное сканирование может перегрузить ресурсы сервера. Обычно это результат неправильной конфигурации сервера, а не проблемы с пауками Google.

Это очень редко, поэтому вам, вероятно, не стоит об этом беспокоиться. Google позволяет вам изменять скорость сканирования (только вниз, а не вверх), если это происходит с вами.

Итак, как мне увеличить скорость сканирования?

В последнее время я много публикую и обновляю старый контент, поэтому Google стремится получать все мои обновления и изменения как можно быстрее. Он учится чаще проверять меня.

Я также перешел на новый веб-хостинг в апреле, который намного быстрее, чем мой старый.

Чем быстрее загружается ваш сайт, тем быстрее Google может его проиндексировать!

Google хочет рекомендовать своим пользователям лучшие веб-сайты. Он ищет сайты, которые удобны для пользователей. Хотя это включает в себя множество факторов, очень важны качественный контент и скорость загрузки сайта.

Проще говоря:

Более быстрый сайт = лучший пользовательский опыт.

Лучший пользовательский опыт = более высокий рейтинг в результатах поиска.

Гораздо важнее, чем то, как часто Google индексирует ваш сайт, сколько страниц он индексирует.Вы хотите, чтобы как можно больше страниц вашего сайта было проиндексировано.

(не волнуйтесь, ваша карта сайта позаботится об этом, о чем я подробно расскажу в шаге 7.)

Но сначала давайте начнем с самого начала. Следующие 18 шагов проведут вас через все, что вам нужно знать об индексировании вашего сайта.

Вам не обязательно делать все 18 шагов, чтобы иметь хорошо проиндексированный веб-сайт, но если вам интересно, как повысить рейтинг в Google, это единственное руководство, которое вам когда-либо понадобится!

Шаг 1. Мой сайт уже проиндексирован?

Если вы не создаете новый сайт, он, вероятно, уже проиндексирован.

Если вы не уверены, вот как это узнать.

Самый простой способ проверить это — выполнить поиск на сайте : yourdomain.com в Google. Если Google знает, что ваш сайт существует и уже просканировал его, вы увидите список результатов, аналогичный тому, который был показан для NeilPatel.com на скриншоте ниже:

Если Google еще не нашел ваш сайт, вы не получите никаких результатов, например:

Если ваш сайт уже проиндексирован, это хорошо, но, вероятно, его можно улучшить.

Остальные шаги в этом руководстве помогут вам убедиться, что ваш сайт проиндексирован в полной мере.

Шаг 2. Установка и настройка Google Analytics и Search Console

Если вы еще не знакомы с этими бесплатными инструментами Google, вот краткое описание.

Google Analytics: Измеряет статистику вашего веб-сайта, такую ​​как посетители, время, проведенное на сайте, какие страницы они просматривали, откуда они и т. Д.

Консоль поиска Google (ранее известная как Google Webmaster Tools): Она позволяет отслеживать различные аспекты вашего веб-сайта, например, когда он последний раз сканировался, любые ошибки индексации, проблемы с безопасностью и т. Д.

Search Console также позволяет вам управлять некоторыми ключевыми аспектами вашего появления в результатах поиска и вручную отправлять карты сайта — все это я расскажу позже в этой статье.

Но сначала давайте приступим.

Если у вас уже есть Google Analytics и Search Console, нажмите здесь, чтобы перейти к Шагу 3: Создание стратегии контент-маркетинга.

Чтобы настроить Google Analytics, нажмите здесь и войдите в свою учетную запись Google.

Это может быть ваш @gmail.com или ваш адрес электронной почты @ mydomain.com, если вы используете сервис Google G Suite for Business.

Затем нажмите «Зарегистрироваться».

Введите имя и URL-адрес своего веб-сайта, затем нажмите «Получить идентификатор отслеживания» внизу страницы.

Вы увидите такую ​​страницу. Не паникуйте!

Есть несколько способов установить Google Analytics на свой веб-сайт.

Настройка Google Analytics

Если вы используете WordPress или другую систему управления контентом, которая запрашивает ваш идентификатор отслеживания Google Analytics, вам просто нужен номер в самом верху.В моем случае это UA-98962030-1.

Это не мой настоящий идентификатор отслеживания! Просто говорю, не размещайте это в Интернете! 😉

Плагин Google Analytics от MonsterInsights для WordPress очень прост в настройке.

Просто скачайте его, загрузите плагин в WordPress, активируйте его, и вы увидите этот экран.

Нажмите синюю кнопку «Аутентификация», и она проведет вас через все остальное.

Для настройки плагина у вас должен быть уже создан профиль Analytics, что мы и сделали на предыдущем шаге.

Если вы не используете WordPress или хотите добавить код Google Analytics вручную, вот как это сделать.

Вам необходимо поместить этот код (в красном поле) на каждую страницу вашего веб-сайта.

Самый простой способ сделать это — создать один файл с кодом в нем, а затем создать строку кода на каждой странице вашего веб-сайта, которая будет загружать этот файл.

Кусок торта, правда?

Не волнуйтесь, вот как это сделать!

Для этого шага вам необходимо иметь доступ к файлам вашего веб-сайта на сервере вашей хостинговой компании.Обычно это делается через FTP.

Откройте свой FTP-клиент (FileZilla — отличный, бесплатный) и войдите на свой сервер. Если у вас нет этой информации, вы можете создать учетную запись FTP в cPanel своего веб-хостинга или просто обратиться к своему веб-хостеру, чтобы попросить их предоставить информацию.

Ваша регистрационная информация должна выглядеть примерно так:

После подключения вы увидите список подобных файлов и папок.

Откройте новый текстовый файл (для этого подойдут Блокнот для Windows или TextEdit для Mac).Убедитесь, что для него установлено значение «Только обычный текст».

В TextEdit вы нажимаете «Формат» -> «Сделать обычный текст», чтобы сделать это.

Это действительно важно, потому что текстовые процессоры, такие как Word, могут добавлять форматирование в код, которое может испортить код на вашем сайте. При работе с кодом всегда используйте обычный текст .

Когда у вас будет обычный текстовый документ, вставьте код Google Analytics. В итоге вы получите:

Сохраните файл как analyticstracking.php. Убедитесь, что у него есть расширение.php, а не .txt.

Если ваш текстовый редактор по какой-то причине сохранил его с именем «analyticstracking.php.txt», просто переименуйте файл на своем компьютере в «analyticstracking.php».

Загрузите этот файл в корневой каталог через FTP (первая папка вашего сайта).

Вам нужно добавить одну строку кода для каждого шаблона страницы, который у вас есть. Это «вызывает» только что созданный файл и обеспечивает отслеживание каждой страницы вашего веб-сайта, использующей этот шаблон, в Google Analytics.

Для этого загрузите все файлы шаблонов PHP для своего веб-сайта и отредактируйте их.

Если у вас есть один с именем header.php, который загружается на каждой странице, вам нужно сделать это только один раз!

Загрузите header.php.

Затем откройте загруженный файл в текстовом редакторе.

Найдите тег и начало, например:

Вставьте одну строку кода сразу после тега.

Скопируйте этот код:

И вставьте сюда:

Сохраните файл header.php и повторно загрузите его на свой веб-сайт.

Готово!

Если у вас нет файла header.php, вам нужно повторить этот процесс для каждого шаблона страницы php, который есть на вашем веб-сайте, например index.php, blog.php и т. Д.

Если вы используете WordPress, вы определенно в выигрыше. Все, что вам нужно сделать, это установить плагин.

Хорошо, нужно настроить еще кое-что, и мы перейдем к шагу 3.

Настройка консоли поиска Google

Теперь, когда мы настроили Google Analytics, пора добавить наш веб-сайт в Google Search Console (ранее известный как Google Webmaster Tools).

Щелкните здесь, чтобы перейти в Search Console. Войдите в свою учетную запись Google.

Вы увидите этот экран:

Нажмите «Начать сейчас».

Затем вам нужно будет подтвердить, что вы являетесь владельцем этого домена. Есть несколько способов сделать это.

По умолчанию он может показать вам вариант подтверждения через ваш веб-хостинг.

Щелкните раскрывающееся меню, чтобы найти поставщика доменного имени.

Если вашего нет в списке, вы можете нажать «Другое» (внизу).

Search Console затем попросит вас создать запись TXT, что потребует изменения конфигурации вашего домена.

Это немного над головой? Не волнуйтесь, у меня есть способ попроще!

Если вы все же хотите добавить запись TXT, вот как это сделать.

Щелкните «Альтернативные методы» вверху.

Есть два простых способа подтвердить свой домен: с помощью Google Analytics или с помощью загрузки файла HTML.

Я расскажу о них обоих.

Чтобы подтвердить с помощью Google Analytics, просто выберите его и нажмите «Подтвердить».

Google проверит вашу учетную запись Google Analytics, чтобы убедиться, что вы являетесь тем, кем себя называете, и если это так, вы увидите сообщение об успешном завершении.Убедитесь, что вы используете тот же аккаунт Google для Search Console, что и для Analytics.

Процесс загрузки файлов HTML по-прежнему остается довольно простым.

Щелкните, чтобы загрузить файл на свой компьютер на шаге 1, затем снова откройте программу FTP. Загрузите HTML-файл Google в свой корневой каталог.

Затем перейдите по URL-адресу, который Google дал вам, чтобы убедиться, что файл там. В моем случае это https://neilpatel.com/googlefba739b2a6dd0306.html.

Если вы загрузили его правильно, вы увидите имя файла в окне браузера.

Вернитесь в Search Console и нажмите «Подтвердить» внизу.

Вот и все!

Не забудьте оставить HTML-файл на вашем сервере. Это гарантирует, что ваш сайт будет оставаться подтвержденным в Search Console.

Есть еще две действительно важные вещи, которые вам нужно сделать сейчас:

• Добавьте обе версии своего домена neilpatel.com и www.neilpatel.com
• Установите предпочтительный домен

Зачем вам это нужно, спросите вы?

Это может вызвать ошибки сканирования, которых мы пытаемся избежать!

Добавить другую версию вашего URL-адреса просто — повторите тот же процесс, который я только что объяснил.В приведенном выше примере я подтвердил свой домен neilpatel.com. Поэтому я бы пошел в Search Console и проделал те же шаги, но вместо этого использовал бы neilpatel.com.

После добавления в Search Console и «yourdomain.com», и «www.yourdomain.com», вам необходимо установить предпочтительный домен.

Для этого нажмите на свой веб-сайт в Search Console.

В правом верхнем углу щелкните значок шестеренки и выберите Параметры сайта.

Выберите, хотите ли вы, чтобы ваши URL отображались с префиксом www.»Или без.

Я собираюсь показать вам все замечательные вещи, которые вы можете делать с Search Console, позже в этой статье, так что держите эту вкладку открытой!

Но теперь нам нужно вернуться к основам маркетинга и поговорить о создании стратегии SEO для вашего контента.

Шаг 3. Создание стратегии контент-маркетинга

В ваших интересах иметь письменную стратегию контент-маркетинга, ориентированную на результаты поиска.

Но не верьте мне на слово.

От Института контент-маркетинга:

«Те, у кого есть задокументированная стратегия контент-маркетинга:

• С гораздо большей вероятностью считают себя эффективными в контент-маркетинге
• Чувствуют себя значительно менее сложными во всех аспектах контент-маркетинга
• Считают себя более эффективными в использовании всех тактик контент-маркетинга и каналов социальных сетей
• Могут оправдать расходы более высокий процент их маркетингового бюджета на контент-маркетинг »

Все это абсолютно верно.Что касается меня, я чувствую себя намного лучше, когда у меня есть письменный план действий, на который я могу ссылаться и отслеживать свой успех.

Мои блоги и многочисленные предприятия не росли бы так быстро, как они, без письменного плана.

Помимо того, что вы будете сосредоточены на своих целях, документированная стратегия содержания также поможет вам проиндексировать страницы вашего сайта путем создания новых страниц содержания.

Согласно отчету HubSpot «Not Another State of Marketing Report 2020», 60% контент-маркетологов заявили, что контент очень важен или чрезвычайно важен для их общей стратегии.

Одно исследование показало, что у компаний, использующих контент-маркетинг, коэффициент конверсии в шесть раз выше.

Делать все возможное, чтобы публиковать ценный, интересный и полезный контент, а затем делать все возможное, чтобы ваши потенциальные клиенты видели его.

Вот пример.

Когда я создаю и публикую на своем сайте профессиональную инфографику, и она публикуется на другой веб-странице со ссылкой на мою страницу, я получаю «кредит» контент-маркетинга за оба сообщения.

Поскольку это инфографика, у меня больше шансов привлечь аудиторию на обоих сайтах.

Инфографика

имеет один из самых высоких показателей вовлеченности читателей. Доказано, что большинство людей тратят больше времени на просмотр инфографики, чем на чтение текста на странице.

Но вы все это читаете, верно ?!

Инфографика распространяется в социальных сетях примерно в 3 раза чаще, чем любым другим типом контента.

Когда вы разрабатываете свою стратегию контент-маркетинга, блоггинг обязательно должен быть в списке.

Но вам также необходимо учитывать контент, который вы будете публиковать на других веб-сайтах. Это не только помогает увеличить ваш трафик, но также помогает повысить скорость индексации и получение входящих ссылок.

Вот несколько примеров внешнего контента, который можно использовать в вашем плане:

• Гостевые посты на других сайтах в вашей нише
• Пресс-релизы, отправленные на сайты, которые публикуют такой контент
• Статьи на сайтах высококачественных каталогов статей (Примечание: здесь будьте осторожны — подавляющее большинство каталогов статей — это , а не высокое качество и может навредить вашему бренду, репутации и поисковой оптимизации.)
• Некоторые авторитетные каталоги — это Medium и HubPages.
• Видео, размещенные на Vimeo или на вашем канале YouTube

Конечно, любой контент , на котором вы размещаете свое имя или бренд, должен быть высокого качества и опубликован на авторитетном сайте с хорошей репутацией.

В противном случае вы нарушите цель поисковой оптимизации и нанесете ущерб своему трафику и бренду.

Контент, опубликованный на сайтах со спамом и имеющий обратную ссылку на ваш сайт, подсказывает результатам поиска Google, что ваш сайт также является спамом.

Примерами сайтов с хорошей репутацией, на которых можно публиковать гостевые сообщения, могут быть Forbes, Entrepreneur, Smashing Magazine и т. Д. Это известные веб-сайты с репутацией качественного контента, а это именно то, что вы хотите ассоциировать со своим брендом.

Не очень хорошие места для публикации? Сайты, полные некачественных красных флажков: загроможденные рекламой, множеством грамматических или орфографических ошибок или неизвестные в той отрасли, на которую вы ориентируетесь.

Я не хочу здесь называть никаких имен, но вашего здравого смысла должно хватить, чтобы сказать вам, что такое сайт, рассылающий спам.Например, сайт под названием neilsbestmarketingadvice101.tumblr.com, вероятно, мало что вам даст, верно?

Хорошо продуманный план контент-маркетинга поможет вам избежать безумной спешки по публикации большего количества контента. Это ставит вас на место водителя поисковой оптимизации, поэтому вы можете сосредоточиться на привлечении потенциальных клиентов и повышении коэффициента конверсии.

Создание стратегии письменного контента не должно быть трудным.

Вот фреймворк, который я использую для своего:

• Каковы ваши цели? Укажите цели SMART и способы измерения своего прогресса (т.е., метрики).
• Кто ваша целевая аудитория? Профили или личности клиентов важны для понимания вашей аудитории и того, что они хотят / нуждаются.
• Какие типы контента вы будете создавать? Вы должны быть уверены, что доставляете контент, который хочет видеть ваша целевая аудитория.
• Где это будет опубликовано? Конечно, вы будете размещать свой собственный контент на своем веб-сайте, но вы также можете обратиться к другим сайтам или использовать такие платформы, как YouTube, LinkedIn и Slideshare.
• Как часто вы будете публиковать свой контент? Гораздо лучше последовательно выпускать одну хорошо написанную и качественную статью в неделю, чем публиковать каждый день в течение недели, а затем ничего не публиковать в течение месяца. Последовательность — ключ к успеху.
• Какие системы вы выберете для публикации своего контента? Системы — это, по сути, просто повторяемые процедуры и шаги для выполнения сложной задачи. Они помогут вам сэкономить время и быстрее писать контент, чтобы вы могли не отставать от графика.Все, что помогает вам публиковать контент за меньшее время, не жертвуя качеством, улучшит вашу прибыль.
• Какие инструменты вы будете использовать? Укажите инструменты и технологии ведения блогов / контента, которые вы будете использовать, и то, как они вписываются в вашу систему.

После того, как вы задокументируете свой план контент-маркетинга, вам станет проще публиковать качественный контент по согласованному графику. Это поможет быстрее проиндексировать новые веб-страницы вашего сайта.

Шаг 4. Начните вести блог

Зачем нужен блог?

Это просто: блоги — это трудолюбивые SEO-машины.Контент блога сканируется и индексируется быстрее, чем статические страницы.

Блоги также привлекают больше трафика. Компании, которые ведут блог, регулярно привлекают на свои сайты на 55% больше посетителей, чем те, которые этого не делают.

Блоги подходят для любого бизнеса, отрасли или ниши, а также почти для всех бизнес-моделей — даже для сайтов B2C и электронной коммерции.

Не бойтесь вести блог.

Да, это требует постоянных усилий. Вы действительно должны регулярно писать (или передавать на аутсорсинг) качественные и подробные сообщения в блог.

Награды, как я выяснил, того стоят.

Если у вас есть сайт электронной торговли, ведение блога не должно быть очень сложным или трудным.

Например, когда вы создаете страницу нового продукта, напишите и опубликуйте в блоге сообщение о новом продукте. Добавьте качественные изображения товара и ссылку на страницу товара. Это помогает поисковым системам быстрее индексировать страницу продукта.

Еще одна отличная стратегия ведения блога для электронной коммерции — писать пост каждый раз, когда покупатель задает вам вопрос.

Для более ориентированной на продажи стратегии поделитесь ссылкой на этот пост в блоге с другими блоггерами и влиятельными лицами, чтобы известить о них. Возможно, они захотят разместить ваш продукт в своих блогах, которые, опять же, являются отличным источником ссылок и трафика и положительно повлияют на вашу скорость сканирования.

Шаг 5. Используйте внутренние ссылки на своем веб-сайте

Внутренние ссылки, то есть ссылки на страницы вашего собственного веб-сайта, — еще один отличный способ быстро проиндексироваться и повысить свою позицию в обычных результатах поиска.

Одним из очевидных источников внутренних ссылок является навигация по вашему сайту.

Важно структурировать навигацию по веб-сайту так, чтобы она была понятна Google.

Ваша навигация должна следовать предсказуемому потоку, например Домашняя страница -> Категория -> Дополнительная страница.

Очевидно, что все элементы должны быть связаны. Итак, если вы веб-дизайнер, ваша навигация может выглядеть так.

Домашняя страница -> Услуги веб-дизайна -> Дизайн WordPress

Видите, как все это связано и имеет смысл?

Еще одним ключевым фактором является правильная структура ваших URL-адресов.Эмпирическое правило Google — сделать их максимально простыми и понятными.

Так что, если это имеет смысл для вас, человека, это должно иметь смысл и для Google.

Еще один отличный способ ссылаться на ваш контент — это сообщения в блогах.

Люди обычно связывают фразы в своих блогах с соответствующими темами, например, если бы я хотел предложить вам дополнительную информацию о структурировании URL-адресов.

Или я мог бы создать такую ​​строку:

Связано: Имеет ли значение структура URL-адреса? Ответ, управляемый данными

Создает ссылки, которые заставляют пауков Google возвращаться и сканировать эти страницы снова.Кроме того, это положительно улучшает пользовательский опыт. Ваши читатели оценят дальнейшие ресурсы.

Не забывайте всегда помнить об удобстве использования. Это идет рука об руку с SEO. У Google есть все эти правила и способы работы, потому что он пытается предоставить своим пользователям наилучшие результаты и дать им ответы, которые они ищут.

Вы должны сосредоточиться на одном и том же!

Шаг 6. Продвигайте публикацию вашего контента в социальных сетях

Естественно, заставить людей делиться вашим контентом в социальных сетях — это хорошо.Совершенно уверен, что мне не нужно убеждать вас в этом!

Он открывает доступ к вашему контенту новым людям, привлекает их на ваш сайт, и это тот контент, который люди хотят видеть больше всего.

Но публикация ваших постов в социальных сетях также имеет преимущества для SEO, поскольку создает обратные ссылки на ваш контент.

Что, если вы внимательно … говорит паукам Google проиндексировать ваш сайт

бонусных балла, если вы уже догадались.

Сейчас ведутся споры о том, насколько ссылки в социальных сетях влияют на ранжирование в обычном поиске.

Google высказал неоднозначные мнения по этому поводу, заявив, что сначала в 2015 году они вообще не учитывали публикации в социальных сетях для ранжирования в органическом поиске, а затем заявили, что они сделали это.

«Да, мы используем это как сигнал. Он используется как сигнал в нашем органическом рейтинге и рейтинге новостей. Мы также используем его, чтобы сделать наши новости универсальными, отмечая, сколько людей поделились статьей ».

Мэтт Каттс, бывший известный Google, сказал несколько лет назад:

Я снял видео еще в мае 2010 года, где я сказал, что мы не использовали «социальные сети» в качестве сигнала, и в то время мы не использовали это как сигнал, но сейчас мы снимаем это на пленку в декабре. 2010, и мы используем это как сигнал.

Bing, с другой стороны, очень четко дал понять, как он использует ссылки социальных сетей в рейтинге результатов поиска, известные как «социальные сигналы».

Многие маркетологи считают, что социальные сигналы являются важным фактором ранжирования, и я один из них.

Обмен в соцсетях помог мне значительно расширить мой блог. Когда я основал NeilPatel.com, я начал с нуля и быстро увеличил свою аудиторию до 60 000 читателей в месяц за 2 месяца.

Сейчас у меня в среднем более 20 миллионов посещений в месяц.

Я приписываю большую часть своего успеха социальному обмену и положительному росту SEO, который я получил благодаря социальным сигналам, ссылкам и повышенной скорости индексации страниц.

В любом случае социальный обмен имеет много других преимуществ для вашего веб-сайта, так что просто сделайте это!

Шаг 7. Добавьте плагин Sitemap, чтобы Google проиндексировал ваш сайт

Во-первых, давайте поговорим о том, что такое карта сайта.

Вы, несомненно, видели слово «карта сайта» раньше, но, возможно, вы никогда не знали, что именно оно означает и как оно соотносится с поисковой оптимизацией.

Карта сайта — это файл, который сообщает Google о файлах на вашем веб-сайте, в том числе о том, как они соотносятся друг с другом. Это упрощает сканирование и индексирование вашего сайта Google.

Карта сайта — это в основном список (в формате XML) всех страниц вашего сайта . Его основная функция — сообщать поисковым системам, когда что-то изменилось — будь то новая веб-страница или изменения на определенной странице, — а также то, как часто поисковая система должна проверять наличие изменений.

Влияют ли карты сайта на ваш поисковый рейтинг? Могут, но ненамного.

Они действительно помогают вашему сайту быстрее индексироваться с более эффективной скоростью сканирования.

В современном мире поиска существует множество мифов о поисковой оптимизации, которых следует опасаться. Но одно остается неизменным: при прочих равных, отличный контент поднимется на вершину, как сливки.

Sitemap помогает сканировать и индексировать ваш контент, чтобы он мог быстрее подняться на вершину поисковой выдачи, согласно блогу Google для веб-мастеров.

По словам Google, «отправка файла Sitemap помогает убедиться, что Google знает об URL-адресах на вашем сайте.”

Это гарантия, что ваш сайт будет немедленно проиндексирован? Нет. Но это определенно эффективный инструмент для веб-мастеров, который помогает в этом процессе.

Кейси Генри задался вопросом, насколько карты сайта повлияют на скорость сканирования и индексирование, поэтому он решил провести небольшой эксперимент.

Кейси поговорил с одним из своих клиентов, который вел довольно популярный блог, используя как WordPress, так и плагин Google XML Sitemaps Generator для WordPress (подробнее об этом ниже).

С разрешения клиента Кейси установил скрипт отслеживания, который отслеживал действия робота Googlebot на сайте.Он также отслеживал, когда бот обращался к карте сайта, когда она была отправлена, и каждую страницу, которая была просканирована. Эти данные хранились в базе данных вместе с отметкой времени, IP-адресом и пользовательским агентом.

Клиент просто продолжил свой обычный график публикации (около двух или трех сообщений в неделю).

Кейси назвал результаты своего эксперимента не чем иным, как «поразительными» с точки зрения поисковой оптимизации.

Но судите сами: когда карта сайта не была отправлена, Google потребовалось в среднем 1375 минут, чтобы найти, просканировать и проиндексировать новый контент.

Когда была отправлена ​​карта сайта? Это среднее значение упало до 14 минут.

Как часто вы должны сообщать Google, чтобы он проверял наличие изменений, отправляя новую карту сайта? Не существует твердого правила.

Однако некоторые виды контента требуют более частого сканирования и индексации.

Например, если вы добавляете новые продукты на сайт электронной торговли, и у каждого из них есть собственная страница продукта, вам нужно, чтобы Google часто проверял их, увеличивая скорость сканирования.То же самое верно и для сайтов, которые регулярно публикуют горячие или свежие новости, которые постоянно конкурируют в запросах поисковой оптимизации.

Но есть гораздо более простой способ создать и отправить карту сайта. Если вы используете WordPress, просто установите и используйте плагин Google XML Sitemaps.

Его настройки позволяют указать плагину, как часто карта сайта должна создаваться, обновляться и отправляться в поисковые системы. Он также может автоматизировать процесс для вас, так что всякий раз, когда вы публикуете новую страницу, карта сайта обновляется и отправляется.

Другие инструменты карты сайта, которые вы можете использовать, включают Генератор XML-карт сайта, онлайн-инструмент, который должен работать для любого типа веб-сайтов.

Получив карту сайта, вы хотите отправить ее в Google Search Console, о чем мы поговорим дальше.

Шаг 8. Отправьте файл Sitemap в Search Console

Очень важно, чтобы ваша карта сайта была актуальной для Google Search Console. Я люблю заходить раз в 2 недели или, по крайней мере, ежемесячно, и обновлять его.

Еще не зарегистрированы в Google Search Console? Вернитесь к шагу 2, чтобы узнать, как это сделать.

Щелкните URL-адрес, чтобы перейти на панель управления для этого сайта. Слева в разделе «Индекс» нажмите «Карты сайта». Вы увидите уже отправленные в Google карты сайта, а также добавите новую карту сайта.

Для следующего шага вам понадобится URL-адрес вашей карты сайта. Если вы используете плагин для WordPress, эта информация будет доступна в его настройках.

Обычно это ваш домен.ru / sitemap.xml.

Как я упоминал выше, вы также можете использовать веб-сайт, такой как XML-Sitemaps.com, для его создания. Для этого просто введите свой URL и выберите периодичность изменения.

Частота изменения просто говорит Google, как часто он должен индексировать ваш сайт. Это всего лишь предложение Google, и паук должен определить, когда он вернется, чтобы снова проиндексировать ваш сайт.

Как только он предоставит вам файл sitemap.xml, загрузите его на свой веб-сайт через FTP.

Получив URL-адрес карты сайта, введите его в Google Search Console.

После отправки вы увидите это внизу страницы.

Когда Google завершит его индексирование, столбец «Обработано» изменится с «Ожидание» на дату, когда он был проиндексирован.

Как видите, только 294 из 473 моих веб-страниц были проиндексированы! Будем надеяться, что за это время паук подберет их больше. Однако не беспокойтесь, если вы увидите похожую статистику — некоторые из этих страниц, вероятно, вы и не хотите индексировать (подробности см. В шаге 17!).

Возьмите за привычку отправлять новую карту сайта не реже одного раза в месяц.

Вы также можете использовать Инструменты Bing для веб-мастеров, чтобы сделать то же самое с Bing. Хорошо бы охватить все ваши базы, тем более что Bing — вторая по популярности поисковая система после Google!

Шаг 9. Создайте каналы социальных сетей

Есть ли у вас профили в социальных сетях для вашего сайта или блога? Если нет, то сейчас самое время.

Почему? Потому что, как мы узнали на шаге 6, один из компонентов поисковой оптимизации — это внимание к социальным сигналам.

Эти сигналы могут побудить поисковые системы сканировать и индексировать ваш новый сайт.

Более того, социальные сигналы помогут вам повысить рейтинг ваших страниц в результатах поиска.

К настоящему времени очевидно, что надежный маркетинговый план в социальных сетях помогает SEO. Но социальные профили на вашем веб-сайте также дают вам другое место для добавления ссылок на ваш сайт или блог.

профилей Twitter, страниц Facebook, профилей LinkedIn или страниц компаний, профилей Pinterest, каналов YouTube и особенно профилей или страниц Google+ — все это легко создать и является идеальным местом для добавления ссылок, указывающих на ваш веб-сайт.

Если вы не хотите создавать новые профили на социальных сайтах для своего нового сайта или блога, вы также можете просто добавить ссылку нового сайта к своим существующим профилям, чтобы увеличить скорость сканирования.

Однако я настоятельно рекомендую создавать новые профили для проектов. Помимо того, что он хорош для SEO, он отлично подходит для брендинга.

Это, вероятно, само собой разумеется, но если вы создаете эти каналы в социальных сетях, будьте готовы также регулярно обновлять их, добавляя новый контент.

Шаг 10. Используйте robots.txt

Если вы не являетесь опытным программистом или разработчиком, возможно, вы видели файл robots.txt в файлах своего домена и задавались вопросом, что это такое и для чего он нужен.

Часть «что это такое» очень проста. Это простой текстовый файл, который должен находиться в корневом каталоге вашего домена. Если вы используете WordPress, он будет в корневом каталоге вашей установки WordPress.

Часть «что он делает» немного сложнее.По сути, robots.txt — это файл, который дает строгие инструкции для роботов поисковых систем о том, какие страницы они могут сканировать и индексировать — и от каких страниц следует держаться подальше.

Когда поисковые роботы находят этот файл в новом домене, они читают содержащиеся в нем инструкции, прежде чем делать что-либо еще.

Если они не находят файл robots.txt, поисковые роботы предполагают, что вы хотите просканировать и проиндексировать каждую страницу.

Теперь вы можете спросить: «С какой стати мне нужно, чтобы поисковые системы , а не индексировали страницу на моем сайте?» Это хороший вопрос!

Короче говоря, это потому, что не каждую страницу, существующую на вашем сайте, следует считать отдельной страницей для результатов поиска.(Подробнее об этом позже!)

Ваш первый шаг — убедиться, что на вашем новом сайте есть файл robots.txt. Вы можете сделать это либо по FTP, либо щелкнув свой файловый менеджер через CPanel (или аналогичный, если ваша хостинговая компания не использует CPanel).

Если его там нет, вы можете легко создать его с помощью текстового редактора, такого как Блокнот.

Примечание: Очень важно использовать только текстовый редактор, а не что-то вроде Word или WordPad, которые могут вставлять невидимые коды в ваш документ, что действительно испортит ситуацию.

WordPress-блоггеры могут оптимизировать свои файлы robots.txt с помощью надежного плагина WordPress, такого как плагин Yoast SEO.

Формат файла robots.txt довольно прост. В первой строке обычно указывается пользовательский агент, который представляет собой просто имя поискового бота — например, Googlebot или Bingbot. Вы также можете использовать звездочку (*) в качестве идентификатора подстановочного знака для всех ботов. Этот тип плагина WordPress — эффективный инструмент для веб-мастеров.

Далее идет строка разрешающих или запрещающих команд.Они сообщают поисковым системам, какие части они должны сканировать и индексировать («Разрешить»), а какие — игнорировать («Запрещать»).

Эти правила гарантируют, что только те страницы, которые вы хотите проиндексировать, попадут в результаты поиска.

Итак, напомним: функция robots.txt заключается в том, чтобы сообщать поисковым системам, что делать с контентом / страницами вашего сайта. Но помогает ли это проиндексировать ваш сайт?

Суровый Агравал из ShoutDreams Media говорит:

Да.

Он смог проиндексировать сайты в течение 24 часов, используя комбинацию стратегий, включая роботов.txt и методы SEO на странице.

При этом важно быть очень осторожным при редактировании файла robots.txt, потому что легко ошибиться, если вы не знаете, что делаете.

Неправильно настроенный файл может скрыть весь ваш сайт от поисковых систем. Это полная противоположность тому, что вы хотите! Вы должны понимать, как правильно редактировать файл robots.txt, чтобы не снизить скорость сканирования.

Вы можете нанять опытного разработчика, который позаботится об этой работе, и оставить его в покое, если вам не нравится риск навредить вашему SEO.

Если вы действительно хотите попробовать это самостоятельно, вы можете использовать инструмент Google robots.txt, чтобы убедиться, что ваш файл правильно закодирован.

Шаг 11. Проиндексируйте свой сайт с помощью других поисковых систем

Вы также можете воспользоваться прямым подходом и отправить URL своего сайта в поисковые системы.

Прежде чем вы это сделаете, вы должны знать, что существует множество разногласий по поводу ручной отправки URL сайта как метода индексации сайта.

Некоторые блоггеры полагают, что это как минимум ненужно, если не вредно.

В большинстве случаев, если ваш сайт работает дольше недели, поисковые системы его уже нашли. Отправлять вручную бессмысленно, а платить компаниям за вас — это кража.

Ручная отправка в поисковую систему также может быть вредной, когда вы размещаете свой сайт на сайтах бесплатной отправки, которые предлагают разместить ваш сайт в нескольких поисковых системах. Эти ссылки могут быть некачественными и отрицательно сказаться на вашем SEO.

Видите все эти случайные каталоги и веб-сайты, куда будет отправлен ваш сайт?

Если эти сайты рассматриваются Google как спам, наличие с них ссылок на ваш сайт повредит вашему SEO-рейтингу.Google накажет вас за «привязанность» к этим сайтам.

Поскольку существуют другие методы, которые работают эффективно, большинство блоггеров и владельцев сайтов игнорируют этот шаг.

С другой стороны, это не займет много времени и не повредит вашему SEO, если вы просто отправляете данные в Google, Bing, Yahoo или другие очень уважаемые веб-сайты.

Чтобы отправить URL-адрес вашего сайта в Google, просто попросите Google повторно просканировать ваши URL-адреса с помощью обновления карты сайта или используйте инструмент проверки URL-адресов.

Примечание: раньше Google позволял вам напрямую отправлять URL-адреса для индексации, но теперь этого не делает.

Шаг 12. Поделитесь своим контентом на агрегаторах

Агрегаторы контента — это веб-сайты, которые действуют как поисковая система для контента, отправленного пользователями.

Это означает, что люди отправляют свой контент на эти сайты, а затем посетители могут искать и находить контент от людей со всего мира. Это огромные сети с доступным для поиска контентом.

Хорошо известные примеры — Reddit и Medium.

Размещение вашего контента на агрегаторах — отличный источник ссылок и новых контактов, как и социальные сети.

Некоторые другие агрегаторы, на которых вы можете поделиться своим контентом:

Medium — также отличное место для публикации вашего контента. Для получения более подробной информации ознакомьтесь с моим полным руководством по увеличению посещаемости вашего веб-сайта с помощью Medium.

Шаг 13: Повсюду делитесь ссылкой на свой веб-сайт

Еще один простой способ получить ссылки на ваш новый сайт или блог — это обновления вашего собственного социального статуса.

Конечно, эти ссылки будут nofollow, но они все равно будут учитываться для целей оповещения об индексировании, поскольку мы знаем, что Google и Bing, по крайней мере, отслеживают социальные сигналы с веб-страниц.

Старая поговорка «ваша сеть — это ваш собственный капитал» также применима и здесь. Если вы только начинаете, вашими первыми клиентами могут быть семья, друзья или знакомые, поэтому не стесняйтесь делиться своим новым сайтом в своих личных аккаунтах в социальных сетях.

Если вы используете Pinterest, выберите высококачественное изображение или снимок экрана со своего нового сайта.

Добавьте URL-адрес и оптимизированное описание (т.е. убедитесь, что вы используете подходящие ключевые слова для своего сайта) и закрепите его либо на существующей доске, либо на новой, которую вы создаете для своего сайта.

Мне нравится, как Whole Foods использует Pinterest для взаимодействия со своей целевой аудиторией (например, гурманами и любителями натуральных рецептов). У них есть доски для каждой темы, включая текущие праздники и сезонные тенденции.

Если вы на YouTube, проявите творческий подход! Запишите короткий видеоролик, представляющий ваш сайт и подчеркивающий его особенности и преимущества. Затем добавьте URL-адрес в описание видео.

Social Media Examiner предлагает поместить ваш URL в первую строку описания.

Я также рекомендую использовать правильные ключевые слова в заголовке и описании.

Если у вас есть существующий список рассылки из другой компании, относящейся к той же нише, что и ваш новый сайт, вы можете разослать по всему списку рассылку, представляя ваш новый сайт и включая ссылку.

Джон Морроу, известный по Copyblogger, сделал это со своим новым сайтом Unstoppable.me. Он составил список адресов электронной почты тысяч людей из своих многочисленных предприятий и успешно использовал его для привлечения трафика на свое новое предприятие.

Когда он опубликовал свой первый пост, он разослал электронное письмо своим подписчикам с других своих веб-сайтов, чтобы сообщить им о своем новом сайте.

Он также использовал раздел биографии на своем сайте SmartBlogger, чтобы привлечь трафик на свой новый блог.

Его первая публикация на Unstoppable.me собрала более 60 000 репостов в Facebook и 3 000 репостов в Twitter всего за первый месяц.

Наконец, не забывайте о своей личной учетной записи электронной почты. Добавьте свой новый URL-адрес и имя сайта в подпись электронной почты.Это просто, но работает.

Шаг 14. Настройка RSS-канала

Что такое RSS?

RSS — это автоматический канал содержания вашего веб-сайта, который обновляется, когда вы публикуете новое сообщение в блоге. Это расшифровывается как Really Simple Syndication или Rich Site Summary, и он подходит как пользователям, так и владельцам сайтов.

Как это влияет на индексирование и сканирование?

Что ж, прежде чем мы перейдем к этому, давайте проясним одну вещь: многие думают, что RSS мертв.

Число пользователей неуклонно снижается с тех пор, как Google убил Google Reader в 2013 году.Я думаю, что RSS развивается, а не умирает.

RSS обычно помогает увеличить читаемость и коэффициент конверсии, но он также может помочь проиндексировать ваши страницы .

Для пользователей RSS-каналы предоставляют гораздо более простой способ получить большой объем контента за более короткое время.

Пользователи могут подписаться на ваш RSS-канал в своей любимой программе для чтения RSS и автоматически получать ваши новые сообщения. Популярные программы чтения RSS — Feedly и Feeder.

Как владелец сайта, вы получаете мгновенное распространение нового контента и возможность для читателей подписаться на вас, не отказываясь от своего адреса электронной почты, что не нравится некоторым людям.

Хотя вы по-прежнему хотите сосредоточить большую часть своих усилий на создании списка адресов электронной почты, предложение подписки на RSS-канал улучшает пользовательский опыт, предоставляя людям, заботящимся о конфиденциальности, еще один вариант подписки на вас.

Рассматривая RSS-канал, вы должны следовать нескольким рекомендациям:

• Решите, хотите ли вы показывать полное содержание сообщения или отрывки. Если вы пишете длинное содержание (более 2 000 слов), вам, скорее всего, следует включить в RSS-канал только отрывки.
• Убедитесь, что ваш канал включает изображения , иначе ваши подписчики могут упустить ценную инфографику или другую графику, необходимую для понимания сообщения.

Настройка RSS-канала с помощью Feedburner (собственный инструмент Google для управления RSS) помогает уведомить Google о том, что у вас есть новое сообщение в блоге или страница, готовая к сканированию и индексированию.

Чтобы создать RSS-канал для своего сайта, перейдите на Feedburner. Войдите в свой аккаунт Google.

Введите свой URL-адрес в поле и нажмите Далее.

Дайте своему каналу заголовок и URL-адрес Feedburner (это будет публичный адрес вашего RSS-канала).

После этого вы увидите сообщение об успешном использовании нового URL-адреса Feedburner. Чтобы заставить людей подписаться на него, просто укажите ссылку на этот URL.

Например, у вас может быть кнопка на вашем веб-сайте с надписью «Подписаться через RSS» и ссылкой на этот URL.

Шаг 15: Разместите свой веб-сайт в каталогах

Вы, наверное, уже знаете, что размещение вашего нового URL в каталогах блогов может помочь вашему сайту «найти» новые потенциальные пользователи.Разве я не говорил тебе не делать этого несколько шагов назад?

Дело в том, что ваш веб-сайт можно проиндексировать быстрее, если вы все сделаете правильно.

Давным-давно бесплатные каталоги блогов засоряли цифровой ландшафт. Существовали буквально сотни — если не тысячи — этих сайтов, и большинство из них практически не представляли никакой ценности для читателей блогов.

Проблема качества стала настолько серьезной, что в 2012 году Google удалил многие бесплатные каталоги сайтов из своего индекса, правильно понизив рейтинг веб-страниц с небольшой ценностью контента.

Moz изучил проблему, проанализировав 2678 каталогов, и пришел к заключению, что «из 2678 каталогов только 94 были забанены — не так уж плохо.

Однако было еще 417 дополнительных каталогов, которые избежали блокировки, но были наказаны ».

Так что же ответ?

Если вы собираетесь отправлять в каталоги, убедитесь, что вы отправляете только в авторитетные каталоги с достойным рейтингом.

Списки лучших каталогов, составленные отраслевыми и авторитетными блогами, могут помочь вам отделить хорошее от плохого, но убедитесь, что список, который вы используете, актуален.

Например, этот от Harsh Agrawal был обновлен совсем недавно, в 2019 году.

Другие варианты, которые вы, возможно, захотите изучить, — это TopRank, на котором есть огромный список сайтов, на которые вы можете отправить свой RSS-канал и блог; Technorati, который является одним из лучших каталогов блогов; и — после того, как вы опубликовали приличное количество высококачественного контента — субдомен Alltop для вашей ниши или отрасли.

Отправка на высококачественные сайты с приличными рейтингами авторитета домена может не только открыть ваш контент для совершенно новой аудитории, но также предоставить входящие ссылки, которые могут подтолкнуть поисковые системы к сканированию и индексации вашего сайта.

Самый простой способ разместить свой сайт сразу в нескольких каталогах — воспользоваться бесплатным сервисом Ping O Matic.

Ping O Matic уведомляет каталоги о том, что ваш веб-сайт изменился и что они должны его проиндексировать. Это займет около 30 секунд, и вот как это сделать.

Введите название вашего блога, URL-адрес домашней страницы и URL-адрес RSS (если он у вас есть), как это. В разделе Services to Ping выберите каталоги, которые подходят для вашего сайта:

Нажмите «Отправить пинг», и все готово.

Шаг 16. Часто проверяйте ошибки сканирования Google

Этот шаг действительно важен для поддержания частоты индексирования. Я люблю проверять свои веб-сайты на наличие ошибок сканирования хотя бы раз в месяц.

Чтобы проверить наличие ошибок сканирования, откройте Search Console.

Слева нажмите «Настройки»> «Статистика сканирования»> «Открыть отчет».

На странице статистики сканирования вы можете узнать, как часто Google индексирует ваш веб-сайт, и это определенно то, за чем нужно следить.

Например, если мои результаты растут, это означает, что Google теперь индексирует меня чаще — это хорошо. Но если ваш график имеет тенденцию к снижению, это может быть признаком того, что вам нужно опубликовать больше контента или отправить новую карту сайта.

Затем посмотрите в разделе «Индекс» и нажмите «Покрытие».

На этом экране отображаются все ошибки, с которыми робот Googlebot столкнулся при сканировании вашего сайта, например ошибки 404.

Вот то, что вам следует отслеживать хотя бы раз в месяц:

• Ошибки сканирования
• Среднее время отклика
• Статистика сканирования

Еще один отличный инструмент, которым можно воспользоваться, — это тестер структурированных данных.Google использует структурированные данные, чтобы лучше понять, о чем ваш сайт.

Структурированные данные в основном означают, что вы предоставляете Google релевантную информацию, чтобы помочь ответить на вопросы пользователей.

Вот пример. Я искал концерты рядом со мной.

Этот веб-сайт использовал структурированные данные, чтобы сообщить Google, что эти списки будут полезны для меня, и они отображаются под своим обычным заголовком и описанием страницы SEO.

Так как вы это тоже получили?

Он довольно продвинутый, так что это может быть еще один элемент, который вы захотите передать на аутсорсинг разработчику.

Вы можете увидеть все варианты структурированных данных в галерее поиска Google.

У Google также есть упрощенный инструмент, который помогает людям, не являющимся разработчиками, добавлять структурированные данные на свои сайты. Перейдите в Помощник по разметке структурированных данных и введите информацию о своем веб-сайте.

Затем вам просто нужно выделить элемент на веб-странице, который вы хотите преобразовать в структурированные данные.

Из всплывающего меню вы можете добавить такие атрибуты, как Автор, Дата публикации, Изображение, URL-адрес, Тело статьи и т. Д.

Если вы внедрили структурированные данные, вы можете использовать инструмент тестирования для их проверки.

Опять же, это довольно сложный процесс, поэтому, если вы не разработчик, вероятно, лучше всего нанять профессионала, который позаботится об этом за вас.

Шаг 17. Убедитесь, что страницы, которые не следует индексировать, не

Есть некоторые страницы, которые вы не хотите, чтобы Google или другие поисковые системы индексировали. Вот страницы, которые вы не хотите показывать в поиске:

Страницы с благодарностью: Обычно это страницы, на которые кто-то попадает после подписки на ваш список рассылки или загрузки электронной книги.Вы же не хотите, чтобы люди проходили мимо очереди и сразу переходили к товарам! Если эти страницы будут проиндексированы, вы потеряете потенциальных клиентов, заполнивших форму.

Повторяющееся содержание: Если какие-либо страницы вашего сайта имеют повторяющееся содержание или немного отличаются друг от друга, например, страница, для которой вы проводите A / B-тест, вы не хотите, чтобы это индексировалось.

Скажем, например, у вас есть две страницы с одинаковым содержанием на вашем сайте. Возможно, это связано с тем, что вы проводите сплит-тестирование визуальных элементов своего дизайна, но содержание двух страниц совершенно одинаково.

Дублированный контент, как вы, наверное, знаете, потенциально может стать проблемой для SEO. Итак, одно из решений — использовать файл robots.txt, чтобы поисковые системы игнорировали один из них.

Вот как сделать так, чтобы страницы, которые вы хотите исключить, не индексировались.

Вариант 1. В вашем файле robots.txt

Помните тот файл robots.txt, который мы создали на шаге 10? Вы можете добавить в него директивы, чтобы поисковые системы не индексировали файл или весь каталог. Это может быть удобно, если вы хотите, чтобы целый раздел вашего сайта оставался неиндексированным.

Чтобы добавить это, откройте файл robots.txt.

См. Шаг 10, чтобы узнать, как это сделать, если вам нужно напомнить.

Чтобы заблокировать индексирование страницы, введите этот код в файл robots.txt.

Запретить: / nameoffolder /

Блокирует все в этой папке. В качестве альтернативы вы можете просто заблокировать один файл.

Запрещено: /folder/filename.html

Сохраните его, повторно загрузите на свой сервер и все. Для получения дополнительной информации о robots.txt, посетите robotstxt.org.

Вариант 2. Используйте ссылки nofollow или noindex

Этот вариант очень прост. Когда вы создаете ссылку на своем сайте, просто добавьте тег nofollow или noindex к ссылке .

Во-первых, давайте рассмотрим, что они означают.

Nofollow: Указывает Google не сканировать ссылки на этой странице.

Это означает, что если я перейду на ваш сайт с neilpatel.com и использую ссылку nofollow, ни один из моих ссылок (или авторитет домена) не будет передан вам.

Noindex: Указывает Google не индексировать страницу, даже если паук ее видит. Он не будет добавлен в результаты поиска.

Вы можете использовать оба одновременно.

Вот пример.

Если вы делаете ссылку на специальную целевую страницу мероприятия, которое проводите только для VIP-персон, и не хотите, чтобы эта страница отображалась в результатах поиска, вы должны указать ссылку на нее с помощью тега noindex.

Это будет выглядеть так: Посмотрите мой супер крутое событие .

Даже если люди будут искать в Google «супер крутое мероприятие Нила», эта страница не появится.

(Вы, однако, получите много вариантов концертов, посвященных памяти Нила Даймонда.)

Чаще всего вам понадобится тег noindex. Обычно вы хотите использовать nofollow только для партнерских ссылок, ссылок, за создание которых вам кто-то заплатил, или для которых вы получаете комиссию. Это потому, что вы не хотите «продавать ссылки».

Когда вы добавляете nofollow, он сообщает Google не передавать полномочия вашего домена этим источникам.По сути, он защищает Интернет от повреждений, когда дело доходит до ссылок.

Если вы хотите, чтобы вся страница была исключена из результатов поиска из всех источников, вместо того, чтобы просто включать теги nofollow или noindex в свои ссылки, выполните следующие действия.

Сначала откройте HTML-код страницы.

Если вы используете CMS (систему управления контентом), такую ​​как WordPress, вы можете отредактировать этот файл с помощью Yoast, чтобы добавить тег noindex.

Если у вас нет такой CMS, как WordPress, вы можете загрузить страницу, которую нужно отредактировать, через FTP.

Не знаете, как использовать FTP? Вернитесь к шагу 2, где я это объясню!

Нажмите на страницу, которую хотите исключить из результатов поиска, и загрузите ее.

Откройте его в текстовом редакторе. Блокнот для Windows или TextEdit на Mac отлично подходят для этого. Найдите тег, например:

Прямо перед этим тегом вы хотите вставить ОДИН из следующих фрагментов кода.

Если вы хотите, чтобы страница была исключена из результатов поиска, но по-прежнему переходила по ссылкам на странице, используйте:

Если вы хотите, чтобы страница включалась в результаты поиска, но чтобы Google не переходил по ссылкам на странице, используйте:

И, если вы хотите, чтобы страница была исключена из поиска И чтобы Google не переходил по ссылкам, используйте:

Как это:

Шаг 18. Составьте план обновления старого содержимого

Итак, что мы узнали об индексировании?

Каждый раз, когда вы обновляете свой веб-сайт, Google хочет сканировать его чаще.

Отличный способ заработать на этом — составить план регулярного обновления старого контента.

Именно этим я сейчас и занимаюсь с этим мега-сообщением!

Этот пост был первоначально опубликован в 2015 году, и я стараюсь обновлять его по крайней мере каждые несколько месяцев или, когда происходят серьезные изменения в Google, чтобы поддерживать его в актуальном состоянии.

Информация быстро устаревает, особенно в быстро меняющемся мире маркетинга. Каждый месяц я составляю список своих старых постов и выбираю несколько, чтобы обновить их свежей информацией и советами.Редактируя хотя бы несколько постов в месяц, я гарантирую, что мой контент останется актуальным и полезным.

Для наилучшего влияния на скорость индексации старайтесь обновлять свой веб-сайт не реже трех раз в неделю. Этими тремя вещами могут быть публикация одного нового сообщения в блоге и обновление содержимого двух старых сообщений.

Обновление по крайней мере три раза в неделю говорит Google, что лучше часто проверять у вас, чтобы убедиться, что на нем установлена ​​последняя версия вашего сайта.

Вся эта индексация и новая информация означает, что обновление ваших старых сообщений может увеличить ваш органический поисковый трафик на 111%!

Вот несколько простых способов обновить старый контент.

Проверьте устаревшие факты или термины: Например, в этом сообщении упоминались инструменты Google для веб-мастеров, которые теперь называются Search Console.

Ссылка на свежие источники информации: Если вы написали сообщение о SEO в 2013 году и использовали в своем сообщении данные того же года, тогда это нормально, но не в 2017 году. Обновите свои оценки и вспомогательную информацию, чтобы они были свежими.

Неработающие ссылки / новые ссылки: Проверьте неработающие ссылки и исправьте их, или при необходимости измените любые ссылки в вашем сообщении на более качественные источники.Например, я могу перенаправить старые ссылки на свежий, новый контент на моем собственном сайте.

Ссылка на другой ваш контент: Включите ссылки на новые сообщения или соответствующий контент, который вы опубликовали после исходного сообщения. Большинство блогеров делают это так:

Связанный: SEO мертв?

Обновите свои точки зрения: Это важно. Просмотрите старые сообщения и обновите свои рекомендации до более актуальных, если необходимо. Вещи меняются! То же самое и с решениями, которые вы предлагаете людям.

Часто задаваемые вопросы о сайте индексирования Google

Какие факторы индексации сайта важны?

Скорость сканирования, способность Google и других поисковых систем индексировать и сканировать ваш сайт, а также ошибки, обнаруженные Google (см. Консоль поиска Google)

Как Google индексирует ваш сайт?

Google использует внутренние ссылки и карты сайта для сканирования вашего сайта. Вы можете отправить карту сайта своего сайта в Google Search Console.

Насколько важен контент-маркетинг для индексации вашего сайта Google?

Увеличение посещаемости ваших страниц может помочь им проиндексировать.Создайте стратегию контент-маркетинга и цели для увеличения вашего трафика.

Какие области контентной стратегии важны для моего нового сайта?

Определите свои цели, целевую аудиторию, типы контента, частоту публикации, систему управления контентом и инструменты, которые вы будете использовать для публикации и продвижения контента.

Google Индексирует ваш сайт Заключение

Надеюсь, вам понравилось это подробное руководство по индексации вашего сайта!

Я знаю, что это очень важно. Я и половины этого не знал, когда начал вести блог.

В моем первом блоге я установил Google Analytics, и все!

Конечно, тогда у нас не было такого количества возможностей для улучшения нашего SEO-рейтинга или индексации, и это не управлялось сложным алгоритмом, как сейчас.

Вот почему я написал это руководство. При запуске нового веб-сайта очень важно изучить SEO и индексацию, особенно в условиях всей конкуренции.

Можно занять место на первой странице и «победить больших парней», но для этого требуется много работы и исследований.

Лучший совет, который у меня есть:

Продолжайте учиться и будьте в курсе новостей отрасли. Все меняется так быстро, особенно когда дело касается поисковых систем.

Изучите SEO и перепроверьте любой новый предложенный метод с помощью собственного независимого исследования, прежде чем пробовать его.

Убедитесь, что вы часто обновляете свой сайт — не только с новым содержанием, но и с обновлением старых сообщений. Это заставляет Google возвращаться, чтобы часто сканировать ваш сайт, и сохраняет эти сообщения актуальными для новых посетителей.

Затем составьте план цифрового маркетинга.

Запишите свой план контент-маркетинга, включая то, как вы будете отслеживать индексирование, аналитику и как вы будете обновлять старую информацию на своем сайте. Для меня не было бы возможности расти так быстро, как я, без письменного плана.

Наконец, получите профессиональную помощь в области SEO, если она вам нужна. Не у всех владельцев бизнеса есть время, чтобы оставаться на вершине маркетинга, тем более, что он так быстро меняется. Профессионал часто может получить результаты намного быстрее — и фактически сэкономить ваши деньги в долгосрочной перспективе.

Какую тактику сканирования и индексирования вы пробовали? Каковы были ваши результаты?

Узнайте, как мое агентство может привлечь огромное количество трафика на ваш веб-сайт

• SEO — разблокируйте огромное количество SEO-трафика. Смотрите реальные результаты.
• Контент-маркетинг — наша команда создает эпический контент, которым будут делиться, получать ссылки и привлекать трафик.
• Paid Media — эффективные платные стратегии с четкой окупаемостью инвестиций.

Заказать звонок

10 способов заставить Google индексировать ваш сайт (которые на самом деле работают)

Если Google не индексирует ваш сайт, вы в значительной степени невидимы. Вы не будете отображаться ни по каким поисковым запросам и вообще не получите никакого органического трафика. Пшик. Нада. Нуль.

Учитывая, что вы здесь, я полагаю, это не новость для вас. Итак, приступим непосредственно к делу.

В этой статье рассказывается, как решить любую из этих трех проблем:

1. Весь ваш веб-сайт не проиндексирован.
2. Некоторые из ваших страниц проиндексированы, а другие нет.
3. Ваши недавно опубликованные веб-страницы не индексируются достаточно быстро.

Но сначала давайте удостоверимся, что мы находимся на одной странице и полностью понимаем эту ошибку индексирования.

Новичок в SEO? Ознакомьтесь с нашим

Что такое сканирование и индексирование?

Google обнаруживает новые веб-страницы с помощью , просматривая сети, а затем они добавляют эти страницы в свой индекс . Они делают это с помощью веб-паука под названием Googlebot .

Запутались? Давайте определим несколько ключевых терминов.

• Сканирование : процесс перехода по гиперссылкам в Интернете для обнаружения нового контента.
• Индексирование : процесс сохранения каждой веб-страницы в обширной базе данных.
• Web spider : Часть программного обеспечения, разработанная для выполнения процесса сканирования в любом масштабе.
• Googlebot : веб-паук Google .

Вот видео от Google, которое объясняет этот процесс более подробно:

https: // www.youtube.com/watch?v=BNHR6IQJGZs

Когда вы что-то гуглите, вы просите Google вернуть все соответствующие страницы из их индекса. Поскольку часто есть миллионы страниц, отвечающих всем требованиям, алгоритм ранжирования Google делает все возможное, чтобы отсортировать страницы так, чтобы вы сначала увидели наилучшие и наиболее релевантные результаты.

Важный момент, который я здесь подчеркиваю, заключается в том, что , индексирование и , ранжирование — это две разные вещи .

Индексирование отображается для гонки; рейтинг выигрывает.

Невозможно выиграть, не заняв первое место в гонке.

Как проверить, проиндексированы ли вы в Google

Зайдите в Google, затем найдите site: yourwebsite.com

Это число примерно показывает, сколько ваших страниц проиндексировал Google.

Если вы хотите проверить статус индекса определенного URL, используйте тот же сайт : yourwebsite.com/web-page-slug .

Никаких результатов не будет, если страница не проиндексирована.

Стоит отметить, что если вы пользователь Google Search Console, вы можете использовать отчет Coverage , чтобы получить более точное представление о статусе индекса вашего веб-сайта. Просто перейдите по ссылке:

Google Search Console> Индекс> Покрытие

Посмотрите количество допустимых страниц (с предупреждениями и без них).

Если в сумме эти два числа не равны нулю, значит, Google проиндексировал по крайней мере некоторые страницы вашего веб-сайта. В противном случае у вас серьезная проблема, потому что ни одна из ваших веб-страниц не проиндексирована.

Примечание.

Не пользуетесь Google Search Console? Зарегистрироваться. Это бесплатно. Каждый, кто управляет веб-сайтом и заботится о привлечении трафика от Google, должен использовать Google Search Console. Это , что важно для .

Вы также можете использовать Search Console, чтобы проверить, проиндексирована ли конкретная страница. Для этого вставьте URL-адрес в инструмент проверки URL-адресов.

Если эта страница проиндексирована, будет написано «URL находится в Google».

Если страница не проиндексирована, вы увидите слова «URL не в Google.”

Как получить индекс в Google

Вы обнаружили, что ваш веб-сайт или веб-страница не проиндексированы в Google? Попробуйте следующее:

1. Перейдите в консоль поиска Google
2. Перейдите к инструменту проверки URL-адресов
3. Вставьте URL-адрес, который Google должен проиндексировать, в строку поиска.
4. Подождите, пока Google проверит URL-адрес
5. Нажмите кнопку «Запросить индексирование»

Этот процесс является хорошей практикой при публикации нового сообщения или страницы. Вы фактически сообщаете Google, что добавили что-то новое на свой сайт и что они должны это изучить.

Однако запрос индексации вряд ли решит основные проблемы, мешающие Google индексировать старые страницы. В этом случае следуйте приведенному ниже контрольному списку, чтобы диагностировать и устранить проблему.

Вот несколько быстрых ссылок на каждую тактику — на случай, если вы уже попробовали:

1. Удалите блоки сканирования в файле robots.txt
2. Удалите ложные теги noindex
3. Включите страницу в карту сайта
4. Удалите мошеннические канонические теги
5. Убедитесь, что страница не потеряна. )
6. Создавайте качественные обратные ссылки

1) Удалите блоки сканирования в ваших роботах.txt файл

Google не индексирует весь ваш веб-сайт? Это могло произойти из-за блокировки сканирования в файле robots.txt.

Чтобы проверить наличие этой проблемы, перейдите по адресу yourdomain.com/robots.txt .

Найдите любой из этих двух фрагментов кода:

 User-agent: Googlebot
Disallow: / 

 Агент пользователя: *
Disallow: / 

Обе из них сообщают роботу Googlebot, что им запрещено сканировать какие-либо страницы вашего сайта. Чтобы решить проблему, удалите их.Это , что просто.

Блок сканирования в robots.txt также может быть причиной, если Google не индексирует одну веб-страницу. Чтобы проверить, так ли это, вставьте URL-адрес в инструмент проверки URL-адресов в Google Search Console. Щелкните блок «Покрытие», чтобы получить более подробную информацию, затем найдите «Сканирование разрешено? Нет: заблокировано файлом robots.txt ».

Это означает, что страница заблокирована в robots.txt.

В таком случае еще раз проверьте файл robots.txt на наличие каких-либо запрещающих правил, относящихся к странице или соответствующему подразделу.

При необходимости удалите.

2) Удалите ложные теги noindex

Google не будет индексировать страницы, если вы им запретите. Это полезно для сохранения конфиденциальности некоторых веб-страниц. Это можно сделать двумя способами:

Метод 1: метатег

Страницы с любым из этих метатегов в разделе не будут проиндексированы Google:

Это метатег роботов, который сообщает поисковым системам, могут ли они индексировать страницу.

Примечание.

Ключевой частью является значение «noindex». Если вы это видите, значит для страницы задано значение noindex.

Чтобы найти все страницы с метатегом noindex на вашем сайте, запустите сканирование с помощью Ahrefs Site Audit. Перейдите к отчету Индексируемость . Ищите предупреждения «Страница Noindex».

Щелкните, чтобы увидеть все затронутые страницы. Удалите метатег noindex со всех страниц, которым он не принадлежит.

Метод 2: X ‑ Robots-Tag

Сканеры также учитывают заголовок HTTP-ответа X ‑ Robots-Tag.Вы можете реализовать это, используя язык сценариев на стороне сервера, такой как PHP, или в файле .htaccess, или изменив конфигурацию сервера.

Инструмент проверки URL в Search Console сообщает, заблокирован ли Google сканирование страницы из-за этого заголовка. Просто введите свой URL и найдите «Индексирование разрешено? Нет: «noindex» обнаружен в http-заголовке «X ‑ Robots-Tag»

Если вы хотите проверить наличие этой проблемы на своем сайте, запустите сканирование в инструменте аудита сайта Ahrefs, затем используйте «Информация о роботах в HTTP-заголовке. »В проводнике страниц:

Попросите разработчика исключить страницы, которые вы хотите проиндексировать, из возврата этого заголовка.

Рекомендуемая литература: Спецификации метатега роботов и HTTP-заголовка X ‑ Robots-Tag

3) Включите страницу в карту сайта

Карта сайта сообщает Google, какие страницы на вашем сайте важны, а какие нет т. Это также может дать некоторые рекомендации о том, как часто их следует сканировать повторно.

Google должен иметь возможность находить страницы на вашем веб-сайте независимо от того, есть ли они в вашей карте сайта, но все же рекомендуется включать их.В конце концов, нет смысла усложнять жизнь Google.

Чтобы проверить, есть ли страница в вашей карте сайта, используйте инструмент проверки URL в Search Console. Если вы видите ошибку «URL не в Google» и «Sitemap: N / A», значит, его нет в вашей карте сайта или он не проиндексирован.

Не используете Search Console? Перейдите по URL-адресу вашей карты сайта — обычно yourdomain.com/sitemap.xml — и выполните поиск страницы.

Или, если вы хотите найти все просканируемые и индексируемые страницы, которых нет в вашей карте сайта, запустите сканирование в Ahrefs Site Audit.Перейдите в Page Explorer и примените эти фильтры:

Эти страницы должны быть в вашей карте сайта, поэтому добавьте их. После этого сообщите Google, что вы обновили карту сайта, выполнив ping по этому URL:

http://www.google.com/ping?sitemap=http://yourwebsite.com/sitemap_url.xml

Replace эту последнюю часть с URL вашей карты сайта. Вы должны увидеть что-то вроде этого:

Это должно ускорить индексацию страницы Google.

4) Удалите ложные канонические теги

Канонический тег сообщает Google, какая версия страницы является предпочтительной.Выглядит это примерно так:

Большинство страниц либо не имеют канонического тега, либо так называемого канонического тега, ссылающегося на себя. Это говорит Google сама страница является предпочтительной и, вероятно, единственной версией. Другими словами, вы хотите, чтобы эта страница была проиндексирована.

Но если на вашей странице есть ложный канонический тег, то он может сообщать Google о предпочтительной версии этой страницы, которая не существует. В этом случае ваша страница не будет проиндексирована.

Чтобы проверить каноничность, воспользуйтесь инструментом Google для проверки URL. Вы увидите предупреждение «Альтернативная страница с каноническим тегом», если канонический тег указывает на другую страницу.

Если этого не должно быть и вы хотите проиндексировать страницу, удалите канонический тег.

ВАЖНО

Канонические теги не всегда плохи. У большинства страниц с этими тегами есть причины. Если вы видите, что ваша страница имеет канонический набор, проверьте каноническую страницу. Если это действительно предпочтительная версия страницы и нет необходимости также индексировать данную страницу, то канонический тег должен остаться.

Если вы хотите быстро найти ложные канонические теги на всем сайте, запустите сканирование с помощью инструмента аудита сайта Ahrefs. Перейдите в проводник страниц. Используйте следующие настройки:

Это ищет страницы в вашей карте сайта с несамодвижущимися каноническими тегами. Поскольку вы почти наверняка захотите проиндексировать страницы в карте сайта, вам следует дополнительно изучить, возвращает ли этот фильтр какие-либо результаты.

Очень вероятно, что у этих страниц либо ненадежный канонический файл, либо их вообще не должно быть в вашей карте сайта.

5) Убедитесь, что страница не «осиротевшая».

Сиротские страницы — это страницы без внутренних ссылок, указывающих на них.

Поскольку Google обнаруживает новое содержание, сканируя Интернет, они не могут обнаружить потерянные страницы с помощью этого процесса. Посетители веб-сайта тоже не смогут их найти.

Чтобы проверить наличие лишних страниц, просканируйте свой сайт с помощью Ahrefs Site Audit. Затем проверьте отчет Links на наличие ошибок «Потерянная страница (нет входящих внутренних ссылок)»:

Здесь показаны все страницы, которые одновременно индексируются и присутствуют в вашей карте сайта, но не имеют внутренних ссылок, указывающих на них.

ВАЖНО

Этот процесс работает только в том случае, если верны два условия:

1. Все страницы, которые вы хотите проиндексировать, находятся в ваших файлах Sitemap
2. Вы установили флажок, чтобы использовать страницы в ваших файлах Sitemap в качестве отправных точек для сканирования при настройке. проект в Ahrefs Site Audit.

Не уверены, что все страницы, которые вы хотите проиндексировать, есть в вашей карте сайта? Попробуйте следующее:

1. Загрузите полный список страниц вашего сайта (через вашу CMS)
2. Просканируйте ваш сайт (используя такой инструмент, как Ahrefs Site Audit)
3. Сделайте перекрестные ссылки на два списка URL-адресов

Любые URL-адреса не обнаружены во время сканирования, являются потерянными страницами.

Вы можете исправить потерянные страницы одним из двух способов:

1. Если страница не важна , удалите ее и удалите из карты сайта.
2. Если страница важна , включите ее во внутреннюю структуру ссылок вашего веб-сайта.

6) Исправить внутренние ссылки nofollow

Ссылки Nofollow — это ссылки с тегом rel = «nofollow». Они предотвращают передачу PageRank на целевой URL. Google также не сканирует ссылки nofollow.

Вот что Google говорит по этому поводу:

По сути, с использованием nofollow заставляет нас отбрасывать целевые ссылки из нашего общего графа сети. Однако целевые страницы могут по-прежнему отображаться в нашем индексе, если другие сайты ссылаются на них без использования nofollow или если URL-адреса отправляются в Google в файле Sitemap.

Короче говоря, вы должны убедиться, что следуют все внутренние ссылки на индексируемые страницы.

Для этого используйте инструмент Ahrefs Site Audit для сканирования вашего сайта.Проверьте отчет Links на предмет индексируемых страниц с ошибками «Страница имеет только входящие внутренние ссылки nofollow»:

Удалите тег nofollow из этих внутренних ссылок, предполагая, что вы хотите, чтобы Google проиндексировал страницу. Если нет, либо удалите страницу, либо не индексируйте ее.

Рекомендуемая литература: Что такое ссылка Nofollow? Все, что вам нужно знать (без жаргона!)

7) Добавьте «мощные» внутренние ссылки

Google обнаруживает новый контент, сканируя ваш веб-сайт.Если вы не укажете внутреннюю ссылку на рассматриваемую страницу, они не смогут ее найти.

Одно из простых решений этой проблемы — добавить на страницу несколько внутренних ссылок. Вы можете сделать это с любой другой веб-страницы, которую Google может сканировать и индексировать. Однако, если вы хотите, чтобы Google проиндексировал страницу как можно быстрее, имеет смысл сделать это с одной из ваших наиболее «мощных» страниц.

Почему? Потому что Google, вероятно, будет повторно сканировать такие страницы быстрее, чем менее важные страницы.

Для этого перейдите в раздел «Сайт» Ahrefs «, введите свой домен и перейдите в отчет Лучшее по ссылкам .

Здесь показаны все страницы вашего веб-сайта, отсортированные по рейтингу URL (UR). Другими словами, сначала отображаются наиболее авторитетные страницы.

Просмотрите этот список и найдите соответствующие страницы, с которых можно добавить внутренние ссылки на рассматриваемую страницу.

Например, если бы мы хотели добавить внутреннюю ссылку на наше руководство по размещению гостевых сообщений, наше руководство по созданию ссылок, вероятно, предложило бы подходящее место для этого. Так получилось, что эта страница является 11-й по значимости страницей в нашем блоге:

Google увидит эту ссылку и перейдет по ней в следующий раз при повторном сканировании страницы.

pro tip

Вставьте страницу, с которой вы добавили внутреннюю ссылку, в инструмент проверки URL-адресов Google. Нажмите кнопку «Запросить индексирование», чтобы сообщить Google, что что-то на странице изменилось и что они должны повторно сканировать это как можно скорее. Это может ускорить процесс обнаружения внутренней ссылки и, следовательно, страницы, которую вы хотите проиндексировать.

8) Убедитесь, что страница ценная и уникальная

Google вряд ли будет индексировать некачественные страницы, потому что они не представляют ценности для пользователей.Вот что сказал об индексировании в 2018 году Джон Мюллер из Google:

Мы никогда не индексируем все известные URL, это нормально. Я бы сфокусировался на том, чтобы сделать сайт потрясающим и вдохновляющим, тогда все обычно получается лучше.

— 🍌 John 🍌 (@JohnMu) 3 января 2018 г.

Он подразумевает, что если вы хотите, чтобы Google проиндексировал ваш веб-сайт или веб-страницу, он должен быть «потрясающим и вдохновляющим».

Если вы исключили технические проблемы из-за отсутствия индексации, то причиной может быть отсутствие ценности.По этой причине стоит просмотреть страницу свежим взглядом и спросить себя: действительно ли эта страница ценна? Сможет ли пользователь найти ценность на этой странице, если щелкнет по ней в результатах поиска?

Если ответ на любой из этих вопросов отрицательный, то вам необходимо улучшить свой контент.

Вы можете найти больше потенциально некачественных страниц, которые не проиндексированы, с помощью инструмента аудита сайта Ahrefs и профилировщика URL. Для этого перейдите в Page Explorer в Ahrefs Site Audit и используйте следующие настройки:

Это вернет «тонкие» страницы, которые можно индексировать и которые в настоящее время не получают органического трафика.Другими словами, есть большая вероятность, что они не проиндексированы.

Экспортируйте отчет, затем вставьте все URL-адреса в URL Profiler и запустите проверку индексации Google.

ВАЖНО

Рекомендуется использовать прокси, если вы делаете это для большого количества страниц (т. Е. Более 100). В противном случае вы рискуете, что ваш IP-адрес будет забанен Google. Если вы не можете этого сделать, другой альтернативой является поиск в Google «бесплатной массовой проверки индексации Google». Есть несколько таких инструментов, но большинство из них ограничено <25 страницами за раз.

Проверьте все не проиндексированные страницы на предмет проблем с качеством. При необходимости улучшите, а затем запросите переиндексацию в Google Search Console.

Вы также должны стремиться исправить проблемы с дублирующимся контентом. Google вряд ли проиндексирует повторяющиеся или почти повторяющиеся страницы. Используйте отчет «Дублированное содержимое » в программе «Аудит сайта», чтобы проверить наличие этих проблем.

9) Удалите некачественные страницы (чтобы оптимизировать «краулинговый бюджет»).

Слишком много некачественных страниц на вашем сайте приводит только к потере краулинга.

Вот что Google говорит по этому поводу:

Потеря ресурсов сервера на [малоценных страницах] приведет к истощению активности сканирования со страниц, которые действительно имеют ценность, что может вызвать значительную задержку в обнаружении качественного контента на сайте. .

Думайте об этом как об учителе, оценивающем эссе, одно из которых ваше. Если им предстоит оценить десять эссе, они довольно быстро доберутся до вашего. Если у них будет сотня, им потребуется немного больше времени. Если у них тысячи, их рабочая нагрузка слишком высока, и они, возможно, никогда не дойдут до оценки вашего эссе.

Google заявляет, что «сканирование бюджета […] — это не то, о чем должно беспокоиться большинство издателей», и что «если на сайте меньше нескольких тысяч URL-адресов, в большинстве случаев он будет сканироваться эффективно».

Тем не менее, удаление некачественных страниц с вашего веб-сайта никогда не бывает плохим. Это может только положительно повлиять на краулинговый бюджет.

Вы можете использовать наш шаблон аудита контента, чтобы найти потенциально некачественные и нерелевантные страницы, которые можно удалить.

10) Создавайте качественные обратные ссылки

Обратные ссылки говорят Google, что веб-страница важна.В конце концов, если кто-то на него ссылается, значит, он должен иметь определенную ценность. Это страницы, которые Google хочет проиндексировать.

Для полной прозрачности Google индексирует не только веб-страницы с обратными ссылками. Есть много (миллиарды) проиндексированных страниц без обратных ссылок. Однако, поскольку Google считает страницы с качественными ссылками более важными, они, скорее всего, будут сканировать — и повторно сканировать — такие страницы быстрее, чем те, у которых нет. Это приводит к более быстрой индексации.

У нас есть много ресурсов для создания качественных обратных ссылок в блоге.

Взгляните на несколько руководств ниже.

Индексирование ≠ рейтинг

Индексирование вашего веб-сайта или веб-страницы в Google не означает рейтинга или трафика.

Это разные вещи.

Индексирование означает, что Google знает о вашем веб-сайте. Это не значит, что они будут ранжировать его по каким-либо релевантным и стоящим запросам.

Вот где приходит SEO — искусство оптимизации ваших веб-страниц для ранжирования по конкретным запросам.

Короче говоря, SEO включает:

• Поиск того, что ищут ваши клиенты;
• Создание контента по этим темам;
• Оптимизация этих страниц под ваши целевые ключевые слова;
• Создание обратных ссылок;
• Регулярно переиздайте контент, чтобы он оставался «вечнозеленым».”

Вот видео, которое поможет вам начать работу с SEO:

… и некоторые статьи:

Заключительные мысли

Есть только две возможные причины, по которым Google не индексирует ваш веб-сайт или веб-страницу:

1. Технические проблемы мешают им сделать это
2. Они считают ваш сайт или страницу некачественными и бесполезными для своих пользователей.

Вполне возможно, что существуют обе эти проблемы.Однако я бы сказал, что технические проблемы встречаются гораздо чаще. Технические проблемы также могут привести к автоматическому созданию индексируемого некачественного контента (например, проблемы с фасетной навигацией). Это нехорошо.

Тем не менее, выполнение приведенного выше контрольного списка должно решить проблему индексации в девяти случаях из десяти.

Просто помните, что индексирование ≠ ранжирование. SEO по-прежнему жизненно важен, если вы хотите ранжироваться по любым полезным поисковым запросам и привлекать постоянный поток органического трафика.

Как заставить Google индексировать ваш веб-сайт

Коротко о том, как попасть в индекс Google

Процесс индексирования Google сложен, многие этапы влияют друг на друга.

Чтобы заставить их быстро проиндексировать ваш веб-сайт, вам нужно убедиться, что нет никаких препятствий, мешающих индексации Google.

Во-вторых, сделайте все возможное, чтобы уведомить Google о том, что у вас есть свежий контент и вы хотите, чтобы ваш веб-сайт был проиндексирован. Имейте в виду, что качество вашего контента и отсутствие внутренних ссылок могут помешать процессу индексации.

Наконец, повысьте популярность своего веб-сайта за счет создания внешних ссылок на него и привлечения людей к обсуждению вашего контента в социальных сетях.

Если вашего контента нет в Google, существует ли он вообще?

Чтобы ваш веб-сайт был виден в доминирующей поисковой системе, его сначала необходимо проиндексировать. В этой статье мы покажем вам, как заставить Google быстро и эффективно проиндексировать ваш сайт и какие препятствия следует избегать.

Краткое описание процесса индексирования Google

Прежде чем углубляться в то, как индексировать ваш сайт, давайте рассмотрим упрощенное объяснение того, как работает процесс индексации Google.

Индекс

Google можно сравнить с огромной библиотекой — она ​​больше, чем все библиотеки мира вместе взятые!

Индекс содержит миллиарды и миллиарды страниц, из которых Google выбирает наиболее релевантные, когда пользователи делают поисковые запросы.

При таком большом количестве контента, который постоянно меняется, Google должен постоянно искать новый контент, контент, который был удален, и контент, который обновлялся — и все это для поддержания актуальности индекса.

Чтобы Google оценил ваш сайт, он сначала должен пройти следующие три этапа:

1. Discovery : обрабатывая карты сайта XML и переходя по ссылкам на других страницах, о которых Google уже знает, поисковая машина обнаруживает новых и обновленных страниц и ставит их в очередь для сканирования.

2. Сканирование : затем Google переходит к сканированию каждой обнаруженной страницы и передает всю найденную информацию процессам индексации.

3. Индексирование : Среди прочего, процессы indexing обрабатывают анализ контента, отображают страницы и определяют, нужно ли их индексировать.

Взаимосвязанность системы индексирования Google

Процесс индексирования Google очень сложен, с множеством взаимозависимостей между этапами, включенными в этот процесс.Если какая-то часть потока выходит из строя, это влияет и на другие фазы.

Например, 10 августа 2020 года SEO-сообщество заметило шквал изменений в рейтинге результатов поиска. Многие утверждали, что это означает, что Google выпускает значительное обновление. Но на следующий день Google объявил, что на самом деле это было вызвано ошибкой в ​​их системе индексирования, которая повлияла на ранжирование:

Чтобы пролить свет на сложность и взаимосвязь процесса индексирования, Гарри Илес объяснил рабочий процесс с кофеином в ветке Twitter:

Этот твит предполагает, что ошибка на этапе индексации может сильно повлиять на последующий процесс — в данном случае испортить систему ранжирования.

Наряду с этим событием важно отметить, что в мае 2020 года Google претерпела обширное обновление ядра, которое повлияло на процесс индексации. С тех пор Google стал медленнее индексировать новый контент и стал более разборчивым в отношении контента, который решает индексировать. Кажется, что его процесс качественной фильтрации стал намного строже, чем раньше.

Полезные ресурсы

Как проверить, проиндексировал ли Google ваш сайт?

Есть несколько быстрых способов проверить, проиндексировал ли Google ваш веб-сайт или все еще застряли на предыдущих этапах обнаружение и сканирование .

Отзыв из Google Search Console

Воспользуйтесь отчетом об индексировании в Google Search Console, чтобы получить быстрый обзор статуса индексирования вашего веб-сайта. В этом отчете содержится обратная связь с более подробной технической информацией о процессе сканирования и индексирования вашего сайта.

Отчет возвращает четыре типа статусов:

1. Действительный : эти страницы были успешно проиндексированы.
2. Действительно с предупреждениями : эти страницы проиндексированы, но есть некоторые проблемы, которые вы, возможно, захотите исправить.
3. Исключено : эти страницы не были проиндексированы, поскольку Google уловил четкие сигналы о том, что их не следует индексировать.
4. Ошибка : Google по какой-то причине не может проиндексировать эти страницы.

Проверка отчета об индексном покрытии вашего веб-сайта

1. Войдите в Google Search Console.
2. Выберите недвижимость.
3. Щелкните Покрытие под индексом на левой панели навигации.

Вот пример того, как выглядит отчет об индексировании для большого веб-сайта:

Отчет об индексировании позволяет быстро проверить общий статус индексирования вашего сайта, а тем временем вы можете использовать инструмент проверки URL в Google Search Console для увеличения отдельных страниц.

Проверьте свой URL в Google Search Console

1. Войдите в Google Search Console.
2. Выберите недвижимость.
3. Отправьте URL-адрес веб-сайта, который хотите проверить.

Далее вы увидите что-то вроде этого:

Если инструмент проверки URL показывает, что URL еще не проиндексирован, вы можете использовать тот же инструмент для запроса индексации.

FAQ

Проверьте кеш URL

Проверьте, есть ли у вашего URL кешированная версия в Google, набрав cache: https: // example.com в Google или в адресную строку, или щелкнув маленькую стрелку, указывающую вниз под URL-адресом в поисковой выдаче.

Если вы видите результат, Google проиндексировал ваш URL. Вот пример для одной из наших статей:

Дата, указанная на снимке экрана, относится к последней индексации веб-сайта. Имейте в виду, что в нем ничего не говорится о том, когда сканировали в последний раз. Как отметил в своем твите Гарри Илес, веб-сайт мог быть просканирован снова без индексации обновлений Google.

В то же время проверка кэша URL-адресов также не является надежным — вы можете увидеть кешированную страницу, даже если — тем временем — страница была удалена из индекса Google.

Если он ранжируется, он проиндексирован как

.

Еще один способ проверить, проиндексированы ли ваши страницы, — это проверить, ранжируются ли они, с помощью средства отслеживания рейтинга или просто проверив данные об эффективности Google Search Console, чтобы узнать, получаете ли вы клики и показы:

Используйте данные о производительности для определения статуса индекса

1. Войдите в Google Search Console.
2. Выберите недвижимость.
3. Щелкните Результаты поиска ниже Производительность слева.
4. Здесь отфильтруйте страницу, которую вы ищете, щелкнув фильтр вверху. По умолчанию он открывается с настройкой URL-адресов, содержащих . Введите URL-адреса, которые вы ищете.

Далее вы увидите что-то вроде этого:

Поиск точного заголовка страницы или URL

В качестве альтернативы, чтобы узнать, проиндексирована ли страница, вы можете выполнить поиск по точному заголовку страницы, заключив его в кавычки ( "Название вашей страницы" ), использовать оператор поиска intitle: с названием вашей страницы ( intitle : "Название вашей страницы" ) или просто введите URL-адрес в Google.

сайт: запросов

Вы также можете проверить, проиндексирована ли ваша страница, с помощью запроса site: для страницы. Вот пример: ввод site: https: //www.contentkingapp.com/academy/control-crawl-indexing/ может показать, проиндексирована ли эта страница.

Однако такой подход не всегда надежен!

Мы видели случаи, когда страницы ранжируются, но не отображаются для сайтов: запросов. Так что никогда не полагайтесь только на эту проверку.

Как заставить Google быстро проиндексировать ваш сайт

Чтобы ваш веб-сайт проиндексировал Google, вам нужно избавиться от любых препятствий, которые могут помешать Google его проиндексировать.

Во-вторых, вы должны упростить поиск вашего контента для Google с помощью push-уведомлений. Помните, что Google всегда стремится предоставлять своим пользователям высококачественный контент, чтобы адекватно отвечать на их запросы. Убедитесь, что ваш контент соответствует этим требованиям.

Наконец, повысьте популярность вашего контента, получая обратные ссылки и заставляя людей говорить о вашем контенте в социальных сетях.

1. Не позволяйте директивам роботов влиять на индексирование

Распространенной причиной того, что Google не индексирует ваш контент, является директива noindex для роботов. Хотя эта директива помогает предотвратить проблемы с дублированием контента, она дает Google мощный сигнал не индексировать определенные страницы вашего веб-сайта. Директивы мета-роботов могут быть реализованы через источник HTML и заголовок HTTP.

В исходном HTML-коде метатег роботов может выглядеть примерно так:

.

Реализуйте их только на страницах, которые вы определенно не хотите индексировать, и в случае, если страница, которую вы хотите проиндексировать, имеет проблемы с индексированием, дважды проверьте, не реализована ли директива noindex.

Обнаружение неиндексированного контента в режиме реального времени

Получайте мгновенные уведомления о любых важных страницах, которые не индексируются. Больше никаких SEO-сюрпризов!

2. Правильно настройте канонические теги

Хотя канонические теги не являются таким сильным сигналом, как директива мета-роботов, их неправильное использование может привести к проблемам с индексированием.Убедитесь, что страницы, которые вы хотите проиндексировать, не канонизированы.

Одна вещь, которую я видел, — это сайты, которые настолько увлечены обеспечением канонизации своих страниц, что в конечном итоге канонизируются на страницы, которые также отмечены noindex .

Google нужны четкие и последовательные сигналы, поэтому канонизация вашего содержания на странице с пометкой noindex может остановить работу затронутых страниц.

3. Не запрещайте контент, который вы хотите проиндексировать

Роботы.txt — важный инструмент, который отправляет всем поисковым системам сигналы о возможности сканирования ваших URL-адресов. Его можно настроить так, чтобы Google знал, что он должен игнорировать определенные части вашего веб-сайта.

Убедитесь, что URL-адреса, которые вы хотите проиндексировать, не запрещены в robots.txt. Ошибки в файле robots.txt могут привести к тому, что новый контент и обновления контента не будут индексироваться. Имейте в виду, что любой может ошибиться в файле robots.txt — даже крупные компании, такие как Ryanair.

Чтобы проверить, какие страницы заблокированы роботами.txt, проверьте отчет «Проиндексировано, но заблокировано файлом robots.txt» в Google Search Console.

Наконечник Pro

Запрещение URL-адреса в robots.txt не обязательно означает, что сайт исчезнет из поиска Google. Веб-сайт может отображаться в поисковой выдаче, но с плохим фрагментом.

Файл robots.txt может быть простым в использовании, но он также довольно мощный с точки зрения создания большого беспорядка. Я видел много случаев, когда веб-сайты были «готовы к работе» и были запущены с помощью Disallow: / .

В результате все страницы блокируются для поисковых систем, и никто не может найти сайт через поиск Google. Тем временем клиент начинает задаваться вопросом, почему Google ничего не индексирует. Одна строка кода может пройти незамеченной и заблокировать поиск всего содержимого вашего веб-сайта Google!

4. Предотвратить ловушки сканера и оптимизировать бюджет сканирования

Чтобы получить максимальную отдачу от сканирования вашего веб-сайта Google, избегайте создания ловушек для сканеров. Ловушки поисковых роботов — это структурные проблемы на веб-сайте, в результате которых сканеры находят практически бесконечное количество нерелевантных URL-адресов, в которых сканеры могут потеряться.

Вы должны убедиться, что техническая база вашего веб-сайта соответствует требованиям, и что вы используете надлежащие инструменты, которые могут быстро обнаруживать ловушки сканера, на которые Google может тратить ваш ценный краулинговый бюджет.

Самая большая причина ловушек для сканеров на веб-сайтах сегодня связана с фасетной навигацией и фильтрами по цене или размеру (особенно если вы можете выбрать несколько). Если вы не скрываете эти URL-адреса от Google, вы можете легко создать миллионы дополнительных URL-адресов всего с нескольких страниц.Помните, что Google может переходить как по обычным ссылкам, так и по ссылкам JavaScript, и что URL-адреса чувствительны к регистру.

Мой совет: убедитесь, что все варианты URL, которые необходимо заблокировать, действительно заблокированы!

5. Загрузите индексируемое содержание Google через карту сайта в формате XML

.

Убедившись, что с вашей стороны нет блокировки, вы должны упростить для Google обнаружение ваших URL-адресов и понимание инфраструктуры вашего веб-сайта в целом. Карты сайта XML — отличный способ сделать это.

Весь недавно опубликованный или обновленный контент, который необходимо проиндексировать, должен автоматически добавляться в ваши XML-карты сайта. Чтобы Google упростил поиск вашего контента, отправьте свои XML-файлы Sitemap в Google Search Console.

1. Войдите в Google Search Console.
2. Выберите свойство, для которого вы хотите отправить карту сайта.
3. Щелкните Карты сайта под Индекс слева.
4. Отправьте URL-адрес XML-файла Sitemap.

Затем Google будет регулярно проверять предоставленную вами карту сайта в формате XML на предмет нового содержания, чтобы обнаруживать, сканировать и, надеюсь, индексировать.

Наконечник Pro

Если у вас большой веб-сайт, имейте в виду, что файлы Sitemap в формате XML должны быть ограничены до 50 000 URL. Лучше создать больше XML-файлов Sitemap с меньшим количеством URL в каждой, чем превышать этот предел.

Оливер Мейсон описал стратегию карты сайта XML (открывается в новой вкладке), в которой он ограничил количество URL до 10 000 и упорядочил их в хронологическом порядке — с помощью карты сайта 1.xml , содержащий самые старые страницы, и sitemap14.xml , содержащий самые последние страницы.

Это привело к улучшению индексации. Кажется, это окупается, если нужно кормить Google меньшим количеством URL-адресов и группировать новый контент вместе.

Мой лучший способ быстро проиндексировать что-либо — это всегда проверять сайт в Search Console и затем отправлять туда XML-карту сайта.

Всегда следите за тем, чтобы в вашей XML-карте сайта были все страницы, которые вы хотите проиндексировать, и убедитесь, что они организованы таким образом, чтобы Google мог их читать — с помощью индексов карты сайта, если это необходимо.

Для меня это был лучший способ постучать в дверь Google, чтобы сообщить им, что они могут путешествовать по веб-сайту как можно скорее и сканировать / индексировать все, что там находится, и вы всегда можете проверить, когда оно было отправлено и в последний раз прочитано Google.

6. Вручную отправьте свои URL-адреса в Google Search Console

.

Хотя Google будет обнаруживать, сканировать и потенциально индексировать ваши новые или обновленные страницы самостоятельно, он все равно платит за то, чтобы подтолкнуть его, отправив URL-адреса в Google Search Console.Таким образом, вы также можете ускорить процесс ранжирования.

Вы можете отправить свои URL-адреса в инспекторе URL-адресов GSC:

1. Войти в Google Search Console
2. Выберите веб-сайт, для которого вы хотите отправить URL
3. Отправить URL в верхнюю часть консоли поиска Google
4. Убедитесь, что URL-адрес индексируется, нажав кнопку ТЕСТИРОВАТЬ URL-адрес .
5. Нажмите кнопку ЗАПРОС ИНДЕКСА .
6. Сделайте то же самое для страниц, которые ссылаются на страницу, которую вы хотите проиндексировать.

Наконечник Pro

Обратите внимание, что страницы могут индексироваться, но не ранжироваться. Например, если вы запрашиваете индексацию в Google Search Console (GSC), ваши страницы будут быстро проиндексированы, но не сразу ранжируются. Однако, как правило, это ускоряет весь процесс.

7. Отправьте сообщение через Google Мой бизнес

.

Отправка сообщения через Google Мой бизнес дает Google дополнительный толчок для сканирования и индексации URL-адресов, которые вы туда включили. Мы не рекомендуем делать это только для любого сообщения, и имейте в виду, что это сообщение будет отображаться на панели знаний Google Мой бизнес с правой стороны при поиске по брендам.

1. Войти в Google Мой бизнес (открывается в новой вкладке)
2. Выберите место, для которого вы хотите отправить сообщение.
3. Щелкните Создать публикацию и выберите тип Что нового .
4. Добавьте фотографию, напишите краткое сообщение, выберите Подробнее вариант для Добавьте кнопку (необязательно) , введите свой URL в поле Ссылка для вашей кнопки и нажмите Опубликовать .
5. Сделайте то же самое для страниц, которые ссылаются на страницу, которую вы хотите проиндексировать.

8. Автоматическое индексирование через Google Indexing API

.

Веб-сайты, на которых есть много недолговечных страниц, таких как объявления о вакансиях, объявления о мероприятиях или прямые трансляции, могут использовать Google Indexing API (открывается в новой вкладке), чтобы автоматически запрашивать у них сканирование и индексирование нового содержания и изменений содержания. Поскольку он позволяет отправлять отдельные URL-адреса, это эффективный способ для Google поддерживать их индекс в актуальном состоянии.

С помощью Indexing API вы можете

• Обновить URL: уведомить Google о новом или обновленном URL для сканирования
• Удалить URL: уведомить Google об удалении устаревшей страницы со своего веб-сайта
• Получить статус запроса: узнать, когда Google сканировал URL в последний раз

Хотя Google не рекомендует кормить их другими типами контента, кроме заданий и событий, мне удалось проиндексировать обычные страницы с помощью API.Я заметил одну вещь: похоже, что API работает лучше для новых страниц, чем для повторной индексации. В какой-то момент Google может применить это, но пока все работает нормально. В RankMath есть плагин (открывается в новой вкладке), который может значительно облегчить работу, но требует небольшой настройки.

9. Предоставляйте Google только высококачественный контент

Цель Google — как можно быстрее вернуть своим пользователям высококачественный контент. Поэтому всегда сосредотачивайтесь на предоставлении Google лучшего контента, который вы можете создать, чтобы повысить свои шансы на быстрое индексирование.

В условиях строгой оценки содержания Google и непрекращающейся конкуренции создание и оптимизация качественного содержания — это процесс, который никогда не прекратится.

Помимо создания нового контента, сосредоточьтесь на улучшении того, что уже есть. Обновите неэффективный контент, чтобы он давал более точные ответы потенциальным посетителям. Если на вашем веб-сайте есть некачественный или устаревший контент, подумайте о том, чтобы либо полностью удалить его, либо отговорить Google тратить на него свой драгоценный бюджет сканирования.

Наконечник Pro

Процесс удаления устаревшего, нерелевантного или просто слишком некачественного контента называется сокращением контента. Избавившись от мертвого груза, вы создаете пространство для другого контента — у которого есть потенциал — для процветания, предоставляя Google только лучшее, что может предложить ваш веб-сайт.

10. Предотвращение дублирования контента

Еще один способ превратить краулинговый бюджет Google в огромную трату — это дублирование контента. Этот термин относится к очень похожему или идентичному контенту, который отображается на нескольких страницах вашего собственного веб-сайта или на других веб-сайтах.

В целом, дублированный контент может сбивать Google с толку. В принципе, Google индексирует только один URL для каждого уникального набора контента. Но поисковой системе сложно определить, какую версию индексировать, и это впоследствии отражается в их результатах поиска. И поскольку идентичные версии продолжают конкурировать друг с другом, это снижает производительность для всех из них.

Дублированный контент может стать серьезной проблемой, в основном для владельцев веб-сайтов электронной коммерции, которым необходимо найти способ сообщить Google, какие части своего веб-сайта нужно индексировать, а какие оставить скрытыми.

С этой целью вы можете использовать robots.txt disallow для фильтров и параметров или реализовать канонизированные URL-адреса. Но, как упоминалось в первой части этой статьи, будьте очень осторожны с тем, что вы реализуете, так как даже небольшое изменение может иметь негативные последствия.

11. Используйте внутренние ссылки и избегайте использования nofollow

.

Внутренние ссылки играют огромную роль в том, чтобы Google понимал тематику вашего веб-сайта и его внутреннюю иерархию. Внедряя стратегически размещенные внутренние ссылки, вы упростите для Google понимание того, о чем ваш контент и как он помогает пользователям.

Убедитесь, что вы избегаете использования атрибута rel = "nofollow" во внутренних ссылках, поскольку значение атрибута nofollow сигнализирует Google, что он не должен переходить по ссылке на целевой URL. Это также приводит к тому, что значение ссылки не передается.

Если вам нужно быстро проиндексировать новые страницы, продумайте стратегию создания внутренних ссылок на них.

Добавление внутренних ссылок на вашу домашнюю страницу и области всего сайта, такие как верхний и нижний колонтитулы, значительно ускорит процесс сканирования и индексации.

Рассмотрите возможность создания динамических областей на вашей домашней странице, в которых будет отображаться ваш последний контент, будь то сообщение в блоге, новостная статья или продукт.

Вы также можете использовать ссылки в мегаменю, в которых перечислены последние URL-адреса в различных таксономиях вашего сайта.

12. Создайте релевантные обратные ссылки на ваш контент

Не будет преувеличением сказать, что построение ссылок — одна из важнейших дисциплин в этой области. По общему мнению, ссылки более чем на 50 процентов способствуют успеху вашего SEO.

По входящим ссылкам, часто называемым обратными ссылками, Google может обнаружить ваш веб-сайт. И поскольку ссылки также передают часть своего авторитета, вы будете индексироваться быстрее, если обратная ссылка поступает с авторитетного веб-сайта, и это значительно повлияет на ваш рейтинг.

Чтобы помочь вам улучшить параметры индексации и ранжирования, вот целый список высокоэффективных стратегий построения ссылок.

13. Создавайте ажиотаж вокруг своего контента в социальных сетях

Ранее в этой статье мы упоминали, что Google стал намного строже в том, что касается того, какой контент они индексируют.Когда вы создаете ажиотаж вокруг своего контента в социальных сетях, это сигнализирует Google, что контент популярен, что ускоряет процесс индексации. Например, размещение вашего контента в Twitter вместе с несколькими популярными хэштегами действительно может помочь ускорить процесс индексации.

Вдобавок к этому, создание ажиотажа вокруг вашего контента также приведет к включению в информационные бюллетени и обратным ссылкам!

Вывод

Правильная индексация вашего сайта в Google может оказаться адской работой.Вам предстоит решать множество технических задач, а также задач, связанных с содержанием и связью с общественностью. А с недавним обновлением ядра Google в мае 2020 года индексировать новые страницы стало еще сложнее.

Но при наличии правильной стратегии и контрольного списка вы можете заставить Google индексировать наиболее важные части вашего веб-сайта и повысить эффективность SEO с помощью высоких рейтингов.

Часто задаваемые вопросы

9 проверенных способов заставить Google сразу же проиндексировать ваш сайт

У вас нулевой органический трафик на вашем сайте? Если да, возможно, Google не индексирует ваш сайт.

Когда Google не индексирует какую-либо веб-страницу, она не отображается в результатах поиска. В результате вы не получите посетителей из поисковой системы.

Но есть несколько способов заставить Google ускорить процесс индексации и начать показывать ваш сайт в поисковой выдаче.

В этой статье мы покажем вам проверенные способы заставить Google сразу же проиндексировать ваш сайт. Но сначала давайте разберемся в основах индекса Google…

Что такое индексирование Google и как оно работает?

Проще говоря, индексирование означает добавление веб-сайта и его страниц в большую базу данных Google, чтобы ваш сайт появлялся в результатах поиска.Индексирование — важная часть работы поиска Google.

Во-первых, Google находит новые веб-страницы с помощью процесса, называемого сканированием. Таким образом Google обнаруживает новый контент на вашем веб-сайте, переходя по разным гиперссылкам, включая входящие и исходящие ссылки.

Как только он находит эти страницы, он добавляет их в свою обширную базу данных (индексирует ваши страницы).

При этом как узнать, проиндексирован ли ваш сайт в Google или нет? Давайте узнаем…

Как проверить, проиндексировал ли Google ваш сайт?

Есть два простых способа узнать, проиндексировал ли Google ваш сайт или нет.

Во-первых, вы можете просто выполнить поиск в Google на своем веб-сайте или веб-странице и посмотреть, отображается ли он в результатах поиска. Если это не так, значит, ваш сайт не был проиндексирован поисковой системой.

А сделать поиск более целенаправленным можно с помощью операторов поиска Google. Например, вы можете ввести site: www.example.com , если хотите найти свой веб-сайт.

Или вы можете ввести URL своей страницы вместе с оператором поиска, чтобы узнать, проиндексирована ли она: site: www.example.com/your-web-page .

Кроме того, вы также можете использовать Google Search Console (ранее известную как Webmaster Tool) для проверки статуса индекса ваших страниц.

В консоли поиска Google введите URL-адрес своей веб-страницы в инструменте Проверка URL-адресов . Если Google проиндексировал вашу страницу, вы увидите сообщение о том, что URL-адрес находится в Google .

А если нет, то вы увидите, что URL не указан в Google . Таким образом вы сможете узнать, проиндексированы ваши страницы или нет.

Вы можете следовать нашему руководству о том, как настроить свой сайт WordPress с помощью Google Search Console, чтобы начать работу.

После проверки статуса индекса, что вы можете сделать, чтобы улучшить процесс индексирования вашего веб-сайта? Вот несколько быстрых способов сразу же проиндексировать ваш сайт…

1. Создайте и отправьте файл Sitemap в поисковые системы

Один из способов помочь поисковым системам проиндексировать ваш сайт — создать карту сайта в формате XML.

Карта сайта — это список важных страниц вашего веб-сайта, написанный в формате XML (расширяемый язык разметки), поэтому поисковые роботы могут легко его понять.Вот как это выглядит:

Создавая карту сайта, вы помогаете роботам поисковых систем перемещаться по вашему сайту, находить новый контент и индексировать ваши страницы. Это помогает улучшить видимость вашего поиска и ранжирует новые страницы, на которых еще нет обратных ссылок.

И что самое приятное, Google предлагает возможность отправлять ваши карты сайта. Это помогает поисковой системе ускорить процесс индексации вашего сайта и отображать ваши страницы в результатах поиска.

Вот простое руководство о том, как разместить веб-сайт в поисковых системах для получения более подробной информации.

2. Удалите теги Nofollow из внутренних ссылок

Иногда ваши веб-страницы не индексируются из-за того, что Google не может их просканировать. Это потому, что если у вас есть какие-либо внутренние ссылки с тегом rel = «nofollow» , то роботы поисковых систем не будут сканировать ссылку и пропускать ее в процессе сканирования.

В результате на серверы Google не отправляются данные о вашей странице для индексации, и эта страница не будет отображаться в результатах поиска. Чтобы решить эту проблему, вам следует проверить свои внутренние ссылки и поискать теги nofollow.

Удалив теги nofollow, вы разрешите поисковой системе переходить по ссылке и обнаруживать контент на веб-странице. Для начала проверьте страницы, которые не индексируются в Google, а затем перейдите на другие страницы своего веб-сайта.

3. Удалить неуместные теги Noindex

Другая причина, по которой Google может не индексировать ваш веб-сайт, заключается в том, что вы говорите ему этого не делать.

Теги Noindex указывают Google исключить страницу из процесса индексации. В результате он не сохранит страницу в своей базе данных и не отобразит ее в результатах поиска.

Таким образом, если на какой-либо странице вашего сайта есть неуместный тег noindex, это предотвратит ее ранжирование, поскольку Google не включит ее в свой индекс.

Чтобы проверить наличие тега noindex, перейдите в раздел своей веб-страницы и найдите метатег, содержащий noindex. Вот как это должно выглядеть:

В случае Google мета-имя будет включать googlebot, а тег будет выглядеть примерно так:

Если вы видите этот тег на своей странице, просто удалите его, чтобы Google мог проиндексировать сообщение.

Еще один способ найти теги noindex — использовать инструмент проверки URL в Google Search Console. Просто введите URL-адрес своей веб-страницы и посмотрите Разрешено индексирование в отчете Охват .

Если на страницу добавлен тег noindex, он должен появиться там, и вы увидите сообщение No: «noindex» обнаружен в http-заголовке «X ‑ Robots-Tag».

4. Проверьте файл Robots.txt на наличие блоков сканирования

Следующее, что нужно проверить, почему ваш сайт не индексируется, — это проверить файл robots.txt файл. Файл robots.txt сообщает поисковой системе, куда им можно перейти, а где нельзя на вашем веб-сайте.

Чтобы найти файл для своего веб-сайта, введите robots.txt в конце URL-адреса вашего сайта (example.com/robots.txt) . Теперь найдите следующий фрагмент кода и удалите его.

Это потому, что этот код блокирует сканирование вашего сайта поисковой системой. А если он не может просканировать ваш сайт, он не проиндексирует его.

Наряду с этим вы также можете искать любые блоки сканирования, которые могут мешать Google индексировать ваш сайт, а затем удалять их.

Например, URL вашей веб-страницы не должен быть запрещен, особенно для user-agent: googlebot. Если да, то удалите его, иначе поисковая система не включит его при сканировании и индексировании.

Чтобы узнать больше, прочтите это подробное руководство по оптимизации файла robots.txt WordPress для SEO.

5. Блокировка или перенаправление страниц низкого качества

Качество ваших страниц также играет важную роль в том, как Google индексирует ваш сайт.

Если у вас есть сотни и тысячи сообщений, но большинство из них не добавляют ценности, Google в конечном итоге уменьшит количество сканирований и индексации вашего сайта.

Причина этого снижения в том, что у Google ограниченный объем серверных ресурсов. Если сканер постоянно находит некачественные страницы, он замедляет обнаружение нового содержания на вашем сайте.

Чтобы избежать этой проблемы, вы можете настроить 301 редирект для своих низкокачественных страниц и направлять их на другую высококачественную страницу. Или вы можете просто удалить их со своего сайта.

Это не только повысит индексируемость вашего сайта, но и улучшит его состояние.

6. Убедитесь, что страницы не дублируются

Наличие дублированного контента может быть еще одной причиной медленной или нулевой индексации Google. Если страница дублируется или имеет содержание, на 99% похожее на другую страницу, Google вряд ли проиндексирует ее.

Итак, убедитесь, что на вашем сайте нет повторяющихся страниц. Если есть, рекомендуется удалить их как можно быстрее, поскольку Google сочтет их недостойным содержанием.

7. Делитесь своими сообщениями в социальных сетях

Чтобы улучшить процесс индексирования вашего сайта, вы должны публиковать новые сообщения в блогах в социальных сетях.Это подает положительный сигнал в Google и повышает ваши шансы на индексацию.

Например, платформа социальных сетей, такая как Twitter, отлично подходит для получения поминутных новостей. Google регулярно сканирует Twitter и даже показывает его фрагменты в результатах поиска.

Если вы только что осветили актуальную тему и разослали об этом твит с URL-адресом своего блога, Google может просканировать ваш твит и отобразить его во фрагменте в результатах поиска.

Поскольку он просканировал и проиндексировал ваш твит, возможно, что Google также сразу же проиндексирует ваш контент.

8. Получайте качественные обратные ссылки

Поскольку поисковый робот Google работает, переходя по ссылкам на ваш веб-сайт, обеспечение высококачественных обратных ссылок поможет улучшить индексирование.

обратных ссылок обеспечивают доверие к вашему контенту, а страниц с высококачественными обратными ссылками будут иметь большее значение для Google , чем страницы без них.

Таким образом, когда вы получите ссылки с авторитетных веб-сайтов, Google сочтет ваш сайт заслуживающим доверия и начнет быстрее индексировать ваш контент.

Есть множество способов получить качественные обратные ссылки, например создать инфографику, начать гостевой блог, найти неработающие ссылки и многое другое.

Вы можете проверить эти 15 быстрых и простых способов получить обратные ссылки.

9. Создание мощных внутренних ссылок

Говоря о ссылках, еще один способ ускорить процесс индексации вашего сайта — это создание мощных внутренних ссылок.

Внутренние ссылки помогают Google обнаруживать контент на вашем веб-сайте при переходе от ссылки к ссылке.

Если на вашем веб-сайте есть страница, на которой нет внутренних ссылок, Google не сможет найти другое содержание на вашем сайте. В результате индексирование других страниц может занять много времени.

Здесь вы можете добавить внутренние ссылки на соответствующие места в вашем контенте. Но вы можете задаться вопросом, что такое мощная внутренняя ссылка?

Что ж, должны быть страницы, которые получают наибольший трафик на вашем сайте. Эти страницы могут иметь хороший рейтинг в Google и должны быть полезны для пользователей.Связывая внутренние ссылки с другими страницами из сообщений с высоким трафиком, вы создаете мощные внутренние ссылки.

Вот полное руководство по созданию ссылок для SEO, которое вы можете использовать, чтобы помочь вам с внутренними ссылками.

И вот оно!

Если у вас возникли проблемы с индексированием своего веб-сайта в Google, попробуйте любое из этих исправлений.