Поисковая система Bing, принадлежащая компании Microsoft, анонсировала релиз усовершенствованного инструмента для тестирования и диагностики файла robots.txt. Он поможет вебмастерам добиться максимальной эффективности в SEO.
По словам Microsoft, вебмастера страдают из-за того, что им приходится вручную подстраивать сайт под поисковики. Новый продукт Bing поможет им не только увидеть все проблемы, возникшие на ресурсе в плане SEO, но и подскажет, как все эти проблемы пошагово исправить. Система работает практически в автоматическом режиме – сама проводит анализ файла и выявляет изъяны.
Файл robots.txt содержит в себе полезную информацию для поисковиков. Так разработчики подсказывают Google, Bing и Яндексу, какие страницы нужно индексировать, а какие — нет. Приложения для проверки содержания robots.txt нужны, чтобы избежать лишних ошибок и, соответственно, проблем после попадания страницы в сеть.
Одной из полезных функций программы станет возможность просматривать несколько разных версий robots.txt в зависимости от нужд пользователя. Можно увидеть документ с шифрованием и без (https и http), а также префиксом WWW. и без него.
Комментарии