Недавно столкнулся с выражением закоженность текста при seo анализе сайта. Забавно наблюдать частое появление новых определений в сео индустрии. Немного поисков и стало понятно что же это такое.
Закоженность текста - показывает какой процент от общего объёма страницы занимает код, то есть например на странице размером в 100кб всего 5кб текста, в таком случае закоженность страницы будет составлять 95%.
Развитие поискового краулера от Google не стоит на месте и он постоянно улучшается. Раньше части сайта завязанные на ajax могли быть не доступны роботу гуглы, но недавно это изменилось.
В 2008 году Googlebot начал сабмиттить GET формы, а этим летом исполнять JavaScript. Сейчас дело дошло до передачи данных серверу методом POST.
Веб-мастер сайта thumbtack.com показал примеры таких запросов в логах Apache за сентябрь-октябрь 2011 года. Запросы идут с адресов, которые действительно принадлежат краулеру Google: 66.249.71.47, 66.249.72.198, 66.249.72.207.
