Это краткое описание не является самым точным, поскольку, как мы увидим дальше, поисковые системы выполнять несколько видов деятельности, чтобы добиться результатов поиска - <я> ползать
, <я> индексация
, <я> обработки
<я> расчете релевантности
, и <я> извлечения
.
<р> Во-первых, поисковые системы ползать
Сети, чтобы посмотреть, что там. Эта задача выполняется с помощью электронной части программного обеспечения, называемого <я> гусеничный
или <я> паук
(или робот Google, как и в случае с Google).
Пауки следовать по ссылкам с одной страницы на другую и индекс все они находят на своем пути. Имея в виду, количество страниц в Интернете (более 20 млрд), это невозможно для паук посетить сайт ежедневно, чтобы посмотреть, если новая страница появилась или если существующая страница была изменена. Иногда сканеры не будут посещать ваш сайт в течение месяца или двух, так в это время ваши усилия SEO не будут вознаграждены. Но нет ничего, что вы можете с этим поделать, так что просто молчать.
<Р> То, что вы можете сделать, это проверить, что гусеничный видит с вашего сайта.
Как уже упоминалось, сканеры не люди, и они не видят изображений, флэш-роликов, JavaScript, фреймы, защищенные паролем страницы и каталоги, так что если у вас есть тонны из них на вашем сайте, вы лучше запустить паук Симулятор
ниже, чтобы увидеть, если эти лакомства для просмотра пауком. Если они не являются видимыми, они не будут индексации, не индексируются, не обрабатываются, и т.д. - одним словом, они будут несуществующими для поисковых систем
<р>
.
Руководство по поисковой Optimization