Для того чтобы робот Google пришел на сайт для индексации, рекомендуются применять следующие основные способы:
Индексация сайта Google происходит по определенной схеме. Поисковая система Google очень тщательно проверяет все новые сайты и поэтому часто попадание в индекс может занять 2, а то и 3 месяца, ведь, как правило, новые сайты посещаются роботом 2-3 раза перед тем, как окончательно заносятся в индекс поисковой системы. Если по истечении недели Ваш сайт появился в выдаче – не спешите торжествовать, еще некоторое время он будет то исчезать, то появляться в выдаче.
Также, новый сайт после посещения роботом может попасть в «песочницу» (sandbox) – фильтр, который применяется для новых сайтов. Сайт, который попал в «песочницу», находится в Кеше поискового робота, но не выводится в результаты поиска. Как правило, в SandBox попадают страницы, которые слишком быстро для сайта, который лишь недавно начал работать, наращивают ссылочный вес. Чаще всего, фильтр «песочница» применяется для коммерческих сайтов – Интернет-магазинов и т.д. Длительность действия фильтра может составить до 6 месяцев. Впрочем, этот фильтр действует не на всех языках, с которыми работает Google – например, в Рунете известно не так много случаев попадания сайтов в «песочницу».
Если сайт не попал в «песочницу», все равно попадание информации о нем в выдачу поисковой системы может занять достаточное количество времени. Google очень внимательно относится к содержанию тегов Title, тексту Keywords и Description (содержание этих метатегов должно быть уникальным для каждой страницы) и насыщенности текста страницы ключевыми словами, продуманности структуры сайта, грамотной внутренней перелинковке и, конечно, наличию внешних ссылок.
После индексации, роботы периодически возвращаются на сайт, оценивая обновления и пересматривая ранг сайта (PR).