В новом аудиоподкасте №391 Николай Шмичков рассказал про 3 способа ускорения индексации в Google в 2021.
Текстовая версия выступления:
“Всем привет!
Вы на канале SEOquick.
Меня зовут Николай Шмичков.
И я хочу рассказать как например добавить свою страничку сайта в индекс?
Какие существуют для этого способы?
Напоминаю что мы уже рассматривали вопросы сиротских страниц и затрагивали тему вообще увеличения индексирования.
Так вот, на момент когда я писал прошлые подкасты Google действительно исключил функцию добавления отдельных страниц в индекс, тем самым заставив многих сеошников как говорится понервничать.
Потому что отдельные страницы в индекс попадали не сразу, а карты сайтов обрабатывались не так быстро.
И в прошлом подкасте про краулинговый бюджет я эту тему затрагивал.
Так вот на самом деле возможность отправки отдельных урлов вернулась в Вебмастер обратно.
Для того чтобы запросить сканирование одной странички просто воспользуйтесь инструментом проверки Урл тот самый, который находится вверху вашего Вебмастера.
Поэтому просто добавьте урл, если вы увидите что URL находится не в Яндексе нажмите кнопочку запросить индексирование.
Инструмент проверит страницу на наличие проблем с индексированием.
Если проблем не будет, страница будет добавлена в очередь.
Если же проблемы выявятся, инструмент их покажет и вам придется их устранять.
Помните, что действительно отправка запроса не является гарантом, что страничка попадет в индекс.
Что это вообще произойдёт.
Более того, страничка может быть исключено из индекса по причине некачественного и мало полезного контента.
Поэтому прежде чем добавлять странички этим методом, я рекомендую пересканировать сайт какими-то парсерами, тем же Screaming Frog или другими аналогичными сервисами.
Для того чтобы поискать малополезный и неуникальный контент.
Именно так называемый поиск по Near Duplicates, поискать тот контент, который является слишком похож на другой контент.
Ну и конечно следует помнить если вы контент писали явно заказывая у копирайтеров когда-то давным-давно и в прошлом, есть очень высокая вероятность, что именно такой контент с индекса и выпадет.
Для добавления большого количества страниц однозначно рекомендуем использовать добавление через карту сайта.
И файл sitemap – это действительно то, что позволяет Google быстро найти все страницы на вашем сайте.
Он может содержать все метаданные в версиях ресурса на других языках, со страницами видео, изображениями, новостями.
Вот как говорится повторная отправка сайтмэпа никак не поможет улучшить сканирование.
Если вы модифицировали страницу, вы должны менять тэг lastmod и ставить соответствующую дату модификации страницы.
Тогда поисковый робот будет действительно обходить эту информацию.
Есть несколько способов дать Google информацию о вашем файле sitemap.
Отправить его в интерфейс в специальном инструменте.
Также можно отправить запрос через Пинг – это через специальный запрос Google google.com / ping? sitemap равно и ссылочку на ваш сайтмэп.
И таким образом вы дадите как говорится пропинговать Гуглу что у вас есть карта сайта.
Убедитесь что этот файл доступен и открывается.
Ну и конечно же не забудьте вставить в любом месте файла robots.txt строку с путём к файлу sitemap в простом примере sitemap двоеточие и ссылочку на своё сайтмэп, этого будет достаточно.
Как вы видите всё достаточно просто и не требует никаких сложностей.
Но например если у вас многомиллионный сайт и вам нужно отправить в индекс страницы, которые появляются случайно.
Есть такой тоже трюк, так называемый “Ловец ботов”.
Про этот трюк рассказывал Дмитрий Шахов называется “Ловец ботов”.
Заключается в том, что вы ставите при помощи такого специального плагина “также советуем почитать, также советуем почитать”.
Суть в чём, есть такой трюк, когда после статьи либо в середине статьи идут рекомендуемые ссылки на похожие материалы.
Вот этот блочок “Также следует почитать” прекрасно позволяет перелинковать те материалы, которые каким-то образом плохо индексируются или вам нужно чтобы почитали.
Так вот, часто таким образом для пользователя перелинковают полезные материалы, ну чтобы он гарантированно по ним перешёл.
Но хочется же перелинковать и для поискового робота.
Поэтому делается простой трюк этот блочок делается чтобы он работал рандомно.
И он действительно показывает рандомные ссылочки, но поисковому роботу можно показывать не рандомные ссылочки, а ссылочки, которые исключены по какой-то причине из индекса.
И здесь можно воспользоваться тем, что собрать список страниц, которые не проиндексированы и делать проверку user-agent.
Если user-agent – это googlebot вместо просто релевантных страничек показывает только те странички которые не проиндексированы.
Это очень сильно увеличит вероятность обхода страничек поисковым роботом по ним и таким образом этот “ловец ботов” позволит вам просканировать те страницы, которые по каким-то причинам в индекс не попали.
По поводу “Ловца ботов” советую почитать Дмитрия Шахова презентацию.
Я постараюсь ссылочку оставить в описании к этому подкасту.
И если вас заинтересует, обязательно перейдите в описание этого подкаста и найдите ссылочку на презентацию.
На этом собственно всё.
Я надеюсь вам было действительно очень интересно.
С удовольствием буду ждать комментариев.
И конечно же подписывайтесь на наши подкасты.
Подписывайтесь на наш youtube-канал где каждый четверг выходят вебинары.
И всех с наступающим праздником.”
