Я сделал небольшой пост, ранее перечисляя несколько инструментов, которые позволяют лучше понять как Google просматривает содержимое страницы , Сегодня я добавлю больше инструментов моделирования пауков и более детальное сравнение того, что ожидать от каждого из них: 
1. DomainTools Text-Browser это один из моих любимых инструментов моделирования пауков: точный, простой в использовании и понятный. Кроме того, все стандартные функции (H-тэги, ссылки, визуализация атрибутов nofollow), он предлагает несколько основных советов по SEO для улучшения вашей SEO оценки, а также перечисляет некоторые важные данные:
- заголовок страницы и мета описание;
- связанные домены;
- общее количество внутренних и исходящих ссылок;
- IP-адрес домена и т. д.
2. Рысь это самый старый и самый известный текстовый веб-браузер. Единственным недостатком является то, что сайт должен " явно разрешить msgstr "это для того, чтобы быть там просмотренным (поэтому большинство сайтов не могут быть доступны с ним).
3. Кеш гугл это еще один способ просмотра только текстовой версии страницы. Конечно, страница должна быть кэширована Google для просмотра таким образом.
4. SEO-браузер это отличный инструмент. Единственная ошибка, которую мне удалось обнаружить, это то, что она помечает ссылки "nofollow" красным, но пропускает ссылки "external nofollow".
Помимо предоставления CSS-версии страницы, инструмент также предлагает расширенный режим, который позволяет увидеть:
- метаданные страницы;
- общее количество ссылок;
- общее количество изображений;
- код состояния заголовка ;
- IP-адрес домена и т. д.
5. Spiderview предлагает удобный интерфейс и целый ряд полезных опций. Сначала он покажет вам общее содержимое страницы (разбор CSS, Javascript и т. Д.), Затем перечислит все внутренние и внешние ссылки и их текст привязки, а в конце предоставит полный исходный код страницы для быстрого ознакомления.
К сожалению, несмотря на то, что пользователь предлагает поставить галочку на опции «nofollow», инструмент полностью игнорирует ссылки «nofollow» (то есть не выделяет их в любом случае).
6. SEOchat Spider Simulator удаляет как CSS, так и HTML, и все, что осталось, это текст без какого-либо форматирования. Он перечисляет как внутренние, так и внешние ссылки (и полностью игнорирует ссылки «nofollowed», то есть вообще не упоминает их).
7. Веб-мастер-инструментарий Spider Simulator дает только «раздетую» версию текста: ни CSS, ни HTML, ни форматирование вообще.