При просмотре Интернета поисковые движки собирают невероятное количество данных (миллионы гигабайтов) по структуре языка, по теме, по связям между контентом. Формально это не искусственный интеллект, но поисковые движки создали такой репозиторий, который может делать сложные определения (основанные общих шаблонах). Как показано на рисунке (будет позже), пауки поисковых движков могут изучать семантические связи по мере того, как они проползают тысячи страниц, охватывающих эту тему (в данном случае это собаки).
Несмотря на то, что контент не всегда нужно структурировать по самым пресказуемым шаблонам (в частности, когда определенный интерес для посетителей представляет другой метод сортировки), логическая организация предметов помогает как людям, которым будет легче пользоваться вашим сайтом, так и поисковым ижкам, которые из-за повышенной тематической релевантности дадут вам более высокие рейтинги.